Markov chain
が存在するならば、可逆（reversible）であるという。可逆マルコフ連鎖では、"π" は常に定常分布である。