Markov process
が成り立つ。この方程式をチャップマン＝コルモゴロフ方程式と呼ぶ。この非線形積分方程式は一般的な確率過程"X" ("t" )が、マルコフ過程となる必要条件を与える。