信息论

机器人视觉、公安司法、军事制导、文化艺术等，使图像处理成为一门引人注目、前景远大的新型学科。 随着图像处理技术的深入发展，从 20 世纪 70 年代中期开始， 计算机技术和人工智能、思维科学研究的迅速发展，数字图像处理向更高、更深层次发展。 人们已开始研究如何用计算机系统解释图像，实现类似人类视觉系统理解外部世界，这被称为图像理解或计算机视觉。 很多国家，特别是发达国家投入更多的人力

生的，因此要用随机变量来描述。  编码器 ：把消息变换成适合于信道传输的信号。  信源编码器 ：将信源的输出进行适当的变换，以提高信息传输的有效性。  信道编码器 ：对信源编码器的输出进行变换，用增加多余度的方法提高信道的抗干扰能力，以提高信息传输的可靠性。  调制器 ：将信道编码器输出的数字序列变换为振幅、频率或相位受到调制控制的形式，以适合在信道中进行较长距离的传输。  信道

P(B/C) P(C/A) P(C/B) P(C/C) = 9/11 1/8 0 2/11 190。 2/9 0 1/8 1/9 且已知 P(A)=11/36, P(B)=4/9, P(C)=1/4。 求该信源的平均信息量。 解 由 (28), 可求得该信源的条件平均信息量 H(xj/xi)=∑i∑j P(xi)P(xj/xi) log P(xj/xi)