已知隨機游動的轉(zhuǎn)移概率矩陣為 求三步轉(zhuǎn)移概率矩陣P(3)及當(dāng)初始分布為P{X0=1}=P{X0=2}=0,P{X0=3}=1時,經(jīng)三步轉(zhuǎn)移后處于狀態(tài)3的概率p。
設(shè)馬爾可夫鏈的一步轉(zhuǎn)移概率矩陣為 試證此鏈不是遍歷的。