问题
单项选择题
以下关于信息的相关描论中,正确的是______。
A.信息符号出现的概率越大,信息的不确定性也越大
B.由信息熵计算公式
可知,信息熵是一个负值
C.信源符号间的相关性越大,信息熵也越小
D.信息量并不依赖具体的传播行为而存在,是对已经实现了的信息流动的评价
答案
参考答案:C
解析: 信息符号出现的概率越大,信息的不确定性就越小;反之信息符号出现的概率越小,信息的不确定性越大。信息符号与及信息量是单调递减关系。具有概率为p(xi)的符号xi的自信息量为,I(xi)=-logp(xi)。
由于信息符号出现的概率总是在闭区间[0,1],因此自信息量I(xi)和信息熵H(X)为非负值。
信源的相关性是指信源符号间的依赖关系使得信息熵减小,即相关程度越大,则信源的实际信息熵越小。当信源符号等概率分布时,信源熵最大。
信息量并不依赖具体的传播行为而存在,是对“具体信源和具体信宿”的某信息潜在的可能流动价值的评价,而不是针对已经实现了的信息流动的评价。