マルコフ過程
推移確率が現在時刻によらずに一定であるようなマルコフ過程。
時刻のパラメタが離散集合を動くマルコフ過程。通常は T = {1, 2, 3, ...} を時刻の集合とする。