马尔可夫链
一般地，在由矩阵formula_13给出的有限马尔可夫链上从任何状态转移到另一个状态的 "k" 步转移概率为 formula_17。