在至少一个状态经过一个固定的时间段后连续返回，则这个过程被称为是“周期的”。
各态历遍性.具有重现性而不具有周期性叫做遍历的。重现性包括局部重现性。
有限状态空间.若状态空间是有限的，则转移概率分布可以矩阵表示，该矩阵称为转移矩阵，记为P。其中处于formula_33的元素等于由于P的每一行各元素之和为1，且P中所有的元素都是非负的，因此P是一个右随机矩阵。
稳定分布与特征向量和单纯形的关系.稳定分布π是一个（行）向量，它的元