En 1480, el infante Alfonso, que en esas fechas tenía cinco años, quedó a cargo de su abuela materna Beatriz de Aveiro, madre de Leonor de Viseu, en la villa fronteriza de Moura y a principios del año siguiente, se desplazó ahí su prometida, Isabel de Aragón, que tenía unos diez años de edad.