假定隨機變量欲裂的長度是有限的,如果信源輸出地信息序列中,符號之間的無相互依賴關系,則稱這類信源為離散平穩(wěn)無記憶信源。
一個隨機事件發(fā)生某一結果后所帶來的信息量成為自信息量,定義為其發(fā)生概率對數(shù)的負值。