Puede verse como la cantidad total de recompensa que el agente espera recibir en el tiempo, partiendo de un estado en particular.