提案手法は、状態遷移確率が部分的に既知の場合にも適用できます。この場合、部分的に既知の状態遷移確率を利用して、Q値やギッティンズ指数の更新を行うことが考えられます。具体的には、部分的に既知の情報を利用して、未知の部分を補完するための補助的な手法やアルゴリズムを導入することで、提案手法を拡張することが可能です。