如果要用程式語言嚟表達上述嘅馬可夫決策過程嘅話，設計者可以用好似以下噉嘅一個矩陣嚟表示唔同狀態之間嘅轉移概率，當中每個橫行表示「如果喺呢個狀態揀咗呢個選擇，會去另外一個狀態嘅概率」－喺狀態  揀咗 嘅話，遊戲狀態會有 50% 機會變成 、50% 機會變成 ... 如此類推：