剩余度(redundancy),工学-信息与通信工程-信息论-信源,信源信息率的多余程度。描述信源统计特性的一个物理量。直观地说,除了在传输和恢复消息时所需的最少、最必要的信息以外,其他部分都叫剩余。而剩余度则表示相对剩余,即在信源中剩余所占的比重。为了确切说明剩余度就需要引入信息熵的概念。若用代表无记忆等概率信源的单个消息熵,代表无记忆不等概率信源的单个消息熵,代表记忆长度为的信源的单个消息熵,代表记忆长度为无限时信源的单个消息熵,则由熵的性质可得到下列表征信源统计特性的不等式:因此对有记忆信源,理论上最小的单个消息熵应为。从理论上看,仅需传送即可。但实际上由于很难掌握全部信源的概率统计特性,只能多传送一些,如传送,这样越大,也就越不经济。为了定量地描述信源的有效性,可规定信源的效率为;规定信源的剩余度为。正是因为信源存在着剩余,也就存在着压缩信息率的可能性。剩余越大,压缩潜力也就越大。工程上所采用的数据压缩、频带压缩均基于这个原理。以英文信源为例:英文有26个字母,加上空档共27个。于是。