如果要用程式語言嚟表達上述嘅馬可夫決策過程嘅話，設計者可以用好似以下噉嘅一個矩陣（matrix）嚟表示唔同狀態之間轉化嘅機會率，當中每個橫行表示「如果喺呢個狀態揀咗呢個選擇，會去另外一個狀態嘅機會率」－喺狀態  揀咗 嘅話，遊戲狀態會有 50% 機會變成 、50% 機會變成 ，如此類推：