Markov chain
例えば、マルコフ連鎖 formula_9 が可算個の状態と確率行列 formula_10 で定義されているとき、formula_11 は