Markov chain
في أبسط نماذج ماركوف (مثل سلسلة ماركوف) الحالة ظاهرة للمراقب بشكل مباشر، وبالتالي فإن احتمالية انتقال الحالة هي العوامل الوحيدة فقط، بينما في نموذج ماركوف المخفي الحالة ليست واضحة مباشرة، ولكن النتائج (في شكل بيانات في ما يلي) ، تعتمد على الحالة، مرئية. كل حالة لديها احتمالية توزيع على النتائج الممكنة. ولذلك، فإن تسلسل النتائج الناتجة تعطي بعض المعلومات عن تسلسل الحالات؛ المعروف أيضا نظرية النمط.