,则自信息量定义为：I ( x i ) = − log p i 显然I ( x i ) ≥ 0 ,且随p i 减小而增大。这里的底数可以任取，方便起见，我们统一取2,此时自信息的单位为”比特“bit)。对于自当概率趋近于1时，自信息量等于0。3)由两个相对独立的不同的信息所提取出的自信息量应等于它们分别提供的自信息量之和，即自信息量满足可加性。1 2 33. 互信
百度试题题目当事件发生的概率为0时，其自信息量为A.0B.1C.无穷大D.无穷小相关知识点：解析C 反馈收藏所以在这个例子中，有人告诉了小明A的概率为1/2的信息量就是2-1.792 = 0.208bit.当然这里还有其
（1）信息是可以识别的（2）信息的载体是可以转换的（3）信息是可以存贮的（4）信息是可以传递的（5）信息是可以加工的（6）信息是可以共享的1.1自信息通信系统模型信源的分类概率论基础一、判断：1、必然事件和不可能事件的自信息量都是0 。2、自信息量是p(xi ) 的单调递减函数。3、单符号离散信源的自信息和信源熵都具有非负性。4、单符号离散信源
≥＾≤ 概率越大，可能性越大，但是信息量越小，不确定性越小，熵越小，自信息越小即：两个相互独立事件并事件的自信息量等于这两个事件自信息量的和。非负性：由于p(a_i)\in \left[ 0,1 \right],所以I(a_i)\geq 0。自信息量I(a_i)=-log_{2}p(a_i)的图像：图2-4 自
