マルコフ連鎖
に等しい。さらに、マルコフ連鎖が時間的に均一、つまり遷移行列Pが添え字