我不允许你现在还不知道信编的这些重要概念考点!

文章目录

  • 前言
  • 一、概论
  • 二、离散信息熵
  • 三、无失真离散信源编码
  • 四、离散信道容量
  • 五、纠错编码
  • 六、连续信源熵和连续信道容量
  • 七、信息率失真函数
  • 八、限失真信源编码


前言

经过对课本前七章整体考点内容的梳理,理论上现在应该对各大题的解题方法拿捏的死死的了,但是概念方面想必还不清楚,这里最后在把重要概念梳理一遍。


一、概论

⮚信息论的创始人是香农,1948年香农发表《通信的数学理论》,从而创立了信息论。

⮚ 香农对信息的定义:信息是对事物运动状态和变化方式的表征,它存在于任何事物之中,可以被认识主体(人或机器)获取和利用。

⮚ 信息的十一条重要性质:①存在的普遍性②有序性③相对性④可度量性⑤可扩充性⑥可存储、传输与携带型⑦可压缩性⑧可替代性⑨可扩散性⑩可共享性⑪时效性

⮚信息按照性质的分类:语法信息、语义

你可能感兴趣的:(信息与编码,新星计划,编码学,经验分享,信息与编码,笔记)