Durante su infancia Ladislao fue testigo directo de la relación tensa entre su padre Esteban V y su abuelo Béla IV, presenciando en muchas ocasiones hechos que probablemente lo afectaron permanentemente.