某信源發(fā)送端有2個符號,xi,i=1,2;p(xi)=a,每秒發(fā)出一個符號。接受端有3種符號yi,j=1,2,3,轉(zhuǎn)移概率矩陣為。 (1)計算接受端的平均不確定度; (2)計算由于噪聲產(chǎn)生的不確定度H(Y|X);
(3)計算信道容量。
設(shè)二元對稱信道的傳遞矩陣為 (1)若P(0)=3/4, P(1)=1/4,求H(X),H(X/Y),H(Y/X)和I(X;Y); (2)求該信道的信道容量及其達(dá)到信道容量時的輸入概率分布。
有一離散無記憶信源,其輸出為X∈{0,1,2},相應(yīng)的概率為p0=1/4,p1=1/4,p2=1/2,設(shè)計兩個獨立的實驗去觀察它,其結(jié)果分別為Y1∈{0,1},Y2∈{0,1},已知條件概率: (1)求I(X;Y1)和I(X;Y2),并判斷哪一個實驗好些 (2)求I(X;Y1Y2),并計算做Y1和Y2兩個實驗比做Y1和Y2中的一個實驗可多得多少關(guān)于X的信息 (3)求I(X;Y1|Y2)和I(X;Y2|Y1),并解釋它們的含義