电子科技大学 电子科技大学10/14/2022第2章 离散信源及离散熵信息论的发展是以信息可以度量为基础的,度量信息的量称为信息量。对于通信系统或其他信息传输系统,消息是由称为信源的人、机器或事物所提供的。信源所提供的消息是多种多样的:如计算机网络节点输出的是二进制数据,模拟电视输出的是连续视频图像和伴音;铺 照 凄 吃 腺 痉 阅 岳 盗 懂 烛 信 郧 忙 思 抓 肛 预 圣 蔬 赌 码 拒 柜 脚 氢 叫 勉 试 十 罚 蚁 信 息 论 ( 电 子 科 大 ) 第2 章 离 散 信 源 及 离 散 熵 信 息 论 ( 电 子 科 大 ) 第2 章 离 散 信 源 及 离 散 熵电子科技大学 电子科技大学10/14/2022又如抽牌,可以抽出后放回去再抽,也可以抽出后不放回去再抽。信源的分类方法很多,但从本质上考虑,一方面可以将信源分为离散信源(discrete source) 和连续信源(continuous source) ,另一方面可以将信源分为无记忆信源(memoryless source) 和有记忆信源(memory source) 。本章主要讨论的问题是:冉 苯 买 施