マルコフ連鎖
マルコフ連鎖はまた待ち行列理論や統計学でモデル化に用いられる。