有限馬爾可夫鏈

有限馬爾可夫鏈有這樣的特點，它的狀態空間既不可能只含瞬時狀態，也不可能含有零常返狀態.因此，一個不可約的非週期有限馬爾可夫鏈必是遍歷的(參 ^[1]  見“不可約馬爾可夫鏈”和“遍歷馬爾可夫鏈”).