定义
对于状态 ,如果 ,则称状态 为常返状态(返回状态);如果 ,则称状态 为非常返态(滑过态)。
注:“常返”一词,有时又称“返回”、“常驻”或“持久”;
“非常返”也称“滑过”或“瞬时”。
分类常返状态分为正常返状态和零常返状态。
令条件数学期望:
是从状态 出发,首次到达状态 的平均转移步数(时间)。
注:若,则是从状态出发,首次返回状态的平均转移步数,成为状态的平均返回时间;对应的称为状态的返回概率;称为从状态出发经过n步转移首次返回状态的概率。
正常返态和零常返态的定义:对于常返态,若,则称状态是正常返的;否则,若,则称状态是零常返的2。
常返态和非常返态的判别定理:是常返态的充要条件是。状态是非常返(