狀態轉移矩陣

他在20世紀初發現：一個系統的某些因素在轉移過程中，第n次結果只受第n-1的結果影響，即只與上一時刻所處狀態有關，而與過去狀態無關。 在馬爾科夫分析中，引入狀態轉移這個概念。所謂狀態是指客觀事物可能出現或存在的狀態；狀態轉移是指客觀事物由一種狀態轉移到另一種狀態。