博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
读书笔记(4)
阅读量:5282 次
发布时间:2019-06-14

本文共 564 字,大约阅读时间需要 1 分钟。

这一次是关于信息的度量。

现在可以说是信息的时代,信息可以说是充斥着我们的整个生活。但是我们好像对信息的多少并没有多少概念。我们知道在正常状态下一桶水是比一瓶水多的,一米是比一厘米长的。那么信息是不是也有一个具体的衡量方式呢?

确实是有的,以一个byte作为单位,以信息的不确定性作为衡量的标准。有点难以理解,可以举个例子。有四个密封箱子ABCD,其中只有一个有东西。现在要求猜出哪一个是有东西的箱子。如果你现在对这几个箱子一无所知,那么你就要一个一个的去猜,这个时候也就相当于4byte的数据。此时的信息量就是4byte.对于一个学计算机的,可能会想到一种优化的方案,那就是二分法。所以现在就只需要两次就可以猜出结果。这样这个问题的答案就是2byte.这就是这一条信息的价值量就是2byte。

我们可以沿着这个方向再继续延展一下,将箱子的数量拓展到1000个。那么就价值量就是10byte。很明显,信息的度量跟问题的不确定性有关。在书中,作者将其称作信息熵,这个可以和化学上的作类比。

所以呢,信息的作用也就很好理解了,那就是消除不确定性。知道的信息越多,随机事件发生的概率也就越小,对使用信息的我们也就越有利。

转载于:https://www.cnblogs.com/tianxiayoujiu/p/9236286.html

你可能感兴趣的文章
Magento开发文档(三):Magento控制器
查看>>
性能调优攻略
查看>>
ie6解决png图片透明问题
查看>>
瞬间的永恒
查看>>
2019-8-5 考试总结
查看>>
JS中实现字符串和数组的相互转化
查看>>
web service和ejb的区别
查看>>
Windows Azure Cloud Service (29) 在Windows Azure发送邮件(下)
查看>>
CS61A Efficiency 笔记
查看>>
微信上传素材返回 '{"errcode":41005,"errmsg":"media data missing"}',php5.6返回
查看>>
div或者p标签单行和多行超出显示省略号
查看>>
Elasticsearch 滚动重启 必读
查看>>
Hadoop基本概念
查看>>
java.util.zip压缩打包文件总结一:压缩文件及文件下面的文件夹
查看>>
浅说 apache setenvif_module模块
查看>>
MySQL--数据插入
查看>>
重新学习python系列(二)? WTF?
查看>>
shell脚本统计文件中单词的个数
查看>>
SPCE061A学习笔记
查看>>
sql 函数
查看>>