科尔莫戈罗夫等式，对任意"k"使得0 < "k" < "n"，其中"S"为此马尔可夫链的状态空间。边缘分布Pr("X" = "x")为第"n"次状态的分布。初始分布为Pr("X" = "x")。用一步转移把过程演变描述为注意：上标（"n"）是索引而非指数。
性质.
可还原性.马尔可夫链是由一个条件分布来表示的这被称为是随机过程中的“转移概率”。这有时也被称作是“一步转移概率”。二、三，以及更多步的转移概率可以导自一步转移概率和马尔可夫性质：