最適政策(optimal policy)はformula_53で表され,任意の信念状態において期待報酬の最大値(最適価値関数(optimal value function)formula_57で表す)を与える.