Q値
Q学習は学習率 formula_21 が以下の条件を満たすとき、全ての Q値は確率 1 で最適な値に収束することが証明されている。