马尔可夫链 马尔可夫链英語Markov chain又稱離散時間馬可夫鏈discretetime Markov chain縮寫為DTMC因俄國數學家安德烈马尔可夫得名为狀態空間中经过从一个状态到另一个状态的转换的随机过程该过程要求具备无记忆的性质下一状态的概率分布只能由当前状态决定在时间序列中它前面的事件均与之无关这种特定类型的无记忆性称作馬可夫性質马尔科夫链作为实际过程的统计模型具有许多应用 在马尔可夫链的每一步系统根据概率分布可以从一个状态变到另一个状态也可以保持当前状态状态的改变叫做转移与不同的状态改变相关的概率叫做转移概率随机漫步就是马尔可夫链的例子随机漫步中每一步的状态是在图形中的点每一步可以移动到任何一个相邻的点在这里移动到每一个点的概率都是相同的无论之前漫步路径是如何的