:::瞬态演变.用"n"步从状态"i"到状态"j"的概率为而单步转移是对于一个时齐马尔可夫链来说：而"n"步转移概率满足查普曼-科尔莫戈罗夫等式，对任意"k"使得0 < "k" < "n"，其中"S"为此马尔可夫链的状态空间。边缘分布Pr("X" = "x")为第"n"次状态的分布。初始分布为Pr("X" = "x")。用一步转移把过程演变描述为注意：上标（"n"）是索引而非指数。
性质.
可还原性.马尔可夫链是由一个条件分布来表