MPOアルゴリズムは、参照ポイントなしでも効果的な結果をもたらすことができます。これは、MPOが重み付けされた損失関数を使用してオフポリシーの報酬最大化目的を直接最適化するためです。通常、DPOやIPOは参照ポリシーに依存しており、そのポリシーに従って学習を行います。一方で、MPOは重み付けされた損失関数を使用することで、参照ポリシーに頼る必要がなくなります。このアプローチにより、学習プロセスが単純化されメモリ使用量も削減されます。