想像家陣有條三個狀態嘅馬可夫鏈，設個向量  做一個分佈嚟表達條鏈嘅狀態（嗰三個數分別表示條鏈處於每個狀態嘅概率）又設時間點  而條鏈家陣處於第一個狀態，，跟住再計