常返状态

在马尔可夫链的每一步，系统根据概率分布，可以从一个状态变到另一个状态，也可以保持当前状态。根据状态转移的不同特性，可以把马尔科夫链的状态分为常返状态和非常返状态。马尔可夫链的具有无穷多次返回特性的状态就称为常返状态。