现性包括局部重现性。
有限状态空间.若状态空间是有限的，则转移概率分布可以矩阵表示，该矩阵称为转移矩阵，记为P。其中处于formula_33的元素等于由于P的每一行各元素之和为1，且P中所有的元素都是非负的，因此P是一个右随机矩阵。
稳定分布与特征向量和单纯形的关系.稳定分布π是一个（行）向量，它的元素都非负且和为1，不随施加P操作而改变，定义为通过将这个定义与特征向量进行比较，我们看到，这两个概念是相关的，并且是由（formula_37）归一