信息论课程总结与习题(ppt 22页)

信息论课程总结与习题目录:
一、信息论的基本概念与术语
二、信息量、熵和不确定度
三、两个基本定理
四、两个基本定理
五、几种研究对象
六、需掌握的重点
七、马尔可夫信源熵的计算方法

 

 

信息论课程总结与习题内容简介:
信息论的基本概念与术语:
1、信号，消息，数据，知识，情报。
2、信息的定义。（香农信息）
3、信息的主要特征。
4、信息的重要性质。
5、信息的分类。
6、信息技术的基本内容。
马尔可夫信源熵的计算方法：
根据题意画出状态图，判断是否是齐次遍历的马尔可夫信源。
写出状态转移概率矩阵，计算状态稳定后的极限概率分布。
根据状态转移概率矩阵和极限概率分布，计算信源的极限熵

..............................