第二章信息的度量2.1信源在何种分布时,熵值最大?又在何种分布时,熵值最小?答:信源在等概率分布时熵值最大;信源有一个为1,其余为0时熵值最小。2.2平均互信息量I(X;Y)与信源概率分布q(x)有何关系?与p(ylx)又是什么关系?答:若信道给定,I(X;Y)是q(x)的上凸形函数;若信源给定,I(X;Y)是q(ylx)的下凸形函数。2.3熵是对信源什么物理量的度量?答:平均信息量2.4设信道输入符号集为xl,x2,xk,则平均每个信道输入符号所能携带的最大信息量是多少?答:H(X)=一丫q(xi)logq(xi)=-log1=logkkki2.5根据平均互信息量的链规则,写出I(X;YZ)的表达式。答:I(X;YZ)=I(X;Y)+1(X;ZlY)2.6互信息量I(x;y)有时候取负值,是由于信道存在干扰或噪声的原因,这种说法对吗?答:互信息量I(x;y)=logQXi1刃,若互信息量取负值,即Q(xilyj)vq(xi),说明事件yi的出现告q(xi)知的是xi出现的可能性更小了。从通信角度看,视xi为发送符号,yi为