本文主要是介绍【科研基础|课程】信息论,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!
信息论课程 -上海交大 - 2020春季学期
F:\B\2.sources\CS258信息论
文章目录
- 1- 信息熵 | 联合熵 | 条件熵 | 链式法则
- 1.1-Entropy
1- 信息熵 | 联合熵 | 条件熵 | 链式法则
P3 信息熵 | 联合熵 | 条件熵 | 链式法则
1.1-Entropy
-
Entropy: Brief History
熵的由来,由热力学第二定律,引出分子的无规则运动,用熵从宏观的角度来研究,与牛顿力学有差异;信息的不确定性定义为熵,难以严格证明,难以描述,故以熵命名。 -
Entropy: Definition
discrete random variable: X X X 样本空间是离散的,有限的.
alphabet: X \mathca
这篇关于【科研基础|课程】信息论的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!