Markov chain
马尔可夫链是满足马尔可夫性质的随机变量序列"X"1, "X"2, "X"3, ...，即给出当前状态，将来状态和过去状态是相互独立的。从形式上看，