設(shè)馬爾可夫鏈的一步轉(zhuǎn)移概率矩陣為 試證此鏈不是遍歷的。
馬爾可天鏈{ξn,n=1,2,…}具有下面的轉(zhuǎn)移矩陣P,計算狀態(tài)1經(jīng)三步仍處于狀態(tài)1的概率。