设有12枚同值硬币,其中有一枚为假币,且只知道假币的重量与真币的重量不同,但不知究竟是重还是
此消息的自信息是多少?
此消息的自信息是多少?
A、只要假币与真币相比重量不一样,且已知其中只有一枚是假币,就可以求解。
B、只要已知假币与真币相比重量不一样,就可以求解。
C、只要已知其中只有一枚是假币,就可以求解。
D、在已知其中只有一枚是假币的情况下,如果已知假币与真币重量不一样,但是不知道假币是轻还是重,那么是绝对不可能只称三次就找出假币的。
(1)H(X)、H(Y)、H(Z)、H(XY)、H(YZ)、H(XZ)以及H(XYZ);
(2)H(X|Y)、H(X|Z)、H(Y|Z)、H(X|YZ)、H(Y|XZ)以及H(Z|XY);
(3)I(X;Y)、I(X;Z)以及I(Y;Z);
(4)I(X;Y|Z)、I(Z;Y|X)以及/(Z;X|Y);
(5)I(XY;Z)、I(X;YZ)以及I(Y;XZ)。
7.What is the minimum value of H(p1,…,pn)=H(P) as P ranges over the set of n-dimensional probability vectors? Find all P's which achieve the minimum.
联合概率分布表 | |||
P(XY) | X | ||
0 | 1 | ||
Y | 0 | 1/3 | 1/3 |
1 | 0 | 1/3 |
求:
①H(X),H(Y);
②H(X|Y),H(Y|X);
③H(XY);
④I(X;Y)。
2.已知信源U={ui|i=1,…,8}包含8个数字消息0、1、2、3、4、5、6和7。为了在二进制信道上传输,用信源编码器把这8个十进制数编成3位二进制码组,信源各消息(符号)的先验概率及相应的代码组如下表所示。
信源各消息先验概率及码组 | ||||||||
信源信息ui | 0 | 1 | 2 | 3 | 4 | 5 | 6 | 7 |
3位二进制码组 | x0y0z0 | x0y0z1 | x0y1z0 | x0y1z1 | x1y0z0 | x1y0z1 | x1y1z0 | x1y1z1 |
000 | 001 | 010 | 011 | 100 | 101 | 110 | 111 | |
P(ui) | 1/4 | 1/4 | 1/8 | 1/8 | 1/16 | 1/16 | 1/16 | 1/16 |
求互信息量I(u3;x0),I(u3;x0y1),I(u3;x0y1z1)。
A.某一时刻信源符号的输出只与当时的信源状态有关,而与之前的状态无关
B.信源状态由当前输出符号和前一时刻信源状态唯一确定
C.一般马尔可夫信源的信息熵是其平均符号熵的极限值
D.m阶马尔可夫信源的极限熵等于m+1阶条件熵
为了保护您的账号安全,请在“简答题”公众号进行验证,点击“官网服务”-“账号验证”后输入验证码“”完成验证,验证成功后方可继续查看答案!