經(jīng)過無窮多次狀態(tài)轉(zhuǎn)移后所得到的狀態(tài)概率稱為終極狀態(tài)概率。
如果P為概率矩陣,而且存在整數(shù)M大于0,使得概率矩陣Pm中諸元素皆非零,則稱P為標準概率矩陣。
在事件的發(fā)展變化過程中,從某一種狀態(tài)出發(fā),下一時刻轉(zhuǎn)移到其他狀態(tài)的可能性,稱為狀態(tài)轉(zhuǎn)移概率。