查看“信息熵”的源代码

=信息熵=
借助于物理学中热力学部分的词汇 [[熵]] 来描述信息论中的概念。

在信息论中，熵是接收的每条消息中包含的信息的平均量，又被称为信息熵、信源熵、平均自信息量。这里， 消息代表来自分布或数据流中的事件、样本或特征。（熵最好理解为不确定性的量度而不是确定性的量度，因为越随机的信源的熵越大。）

[[File:Entropy_flip_2_coins.jpg|400px]]
=参考资料=
https://zh.wikipedia.org/wiki/%E7%86%B5_(%E4%BF%A1%E6%81%AF%E8%AE%BA)