Markov chain
以上就是反转的马尔可夫链。因而，如果存在一个π，使得：