Oración 1: en otras palabras, Qπ(x, u) = ∞∑ t=0 Eπ[rt+1 − J(π)|x0 = x, u0 = u], ∀x ∈ S, u ∈ A Nota: Observe que se puede expresar a la función de valor en términos de esta recompensa dife- rencial esperada de la siguiente manera V π(x) = ∑ u∈A π(x, u)Qπ(x, u) Como se mencionó antes, la idea de estos métodos es actualizar el parámetro de la política en dirección del gradiente de la recompensa promedio
Oración 2: considere el siguiente lema Lema 3.1
Conector: por lo tanto,
Relación: reasoning
Género: theses