سلسلة ماركوف
تشتمل سلسلة ماركوف المستمرة على المصفوفات الانتقالية المعتادة والتي يتم تحديدها من خلال الوقت.formula_1.   على وجه التحديد، إذا  formula_2