Tuesday, May 20, 2014

shanon entropy bit 信息和信息的度量 是物理的 体系的香农熵减少1 bit(即由S = 1 bit变为0


斯韦妖热机循环过程中的作用,我们首先说
明什么是信息和信息的度量,以及为什么信息本
质上是物理的。一般说来,一个物体所包含的信
息是由其可能状态的多少来确定的。一个人事先

并不知道物体处在n 个状态中的哪一个状态上,

只是知道每一个状态相应的几率为P1P2

P3,……,Pn,香农(C. E. Shannon)

S = -Σ

k= 1
n

Pk log2 Pk

来刻画信息量[26],此S 称为香农熵。例如,在希

拉德模型中,气体分子开始以50%的几率分别处

A B两个区域。一旦人们知道气体分子是处

在两个态之中的哪一个态上,人们便获得了1 bit
的信息。
基于以上关于信息及其度量的简单讨论,我

们可以用图5 描述一个信息擦除的物理过程。设
一个气体分子可能处在左边或右边中任意一个,
但是我们不知道到底是哪一个。我们事先不管分子
是处在左边或右边,只要抽出中间挡板,并且把活
塞从右向左一直推到中间,分子最后必然是处在左

边。于是,体系的香农熵减少1 bit(即由S = 1 bit
0)。相应地,外界对系统做功为W = kTln2


麦克斯韦妖与信息处理的物理极限Maxwell's demon and the ...

d.wanfangdata.com.cn › 期刊首页物理2013年11期 - 轉為繁體網頁
由 孙昌璞 著作 - ‎2013 - ‎相關文章
2013年11月20日 - 文章系统地评述了麦克斯韦妖佯谬相关的热力学基本观念的发端、历史沿革 ... 文章作者从以下两个方面详细地阐述了为什么信息处理过程本质上是 ...


 

No comments:

Post a Comment