近便政策最佳化

近便政策最佳化係一類無模型嘅強化學習演算法。PPO演算法屬政策梯度方法，即係啲演算法係跟個政策空間當中 / 出政策，而嘸係挃值畀啲狀態-動作孖。

PPO 演算法有一啲優點係信任域政策最佳化 (TRPO) 都有嘅，但 PPO 易實現、通用過 TRPO，又有樣本複雜度好過。

變體 
PPO 有兩種主要嘅變體，一種係 PPO-Penalty，一種係 PPO-Clip。

強化學習
 時間差分學習
 博弈論

考

OpenAI 嘅 Announcement 畀近便政策最佳化
強化學習