No obstante, en el verano de 1554 fue trasladado a Villagarcía de Campos (Valladolid) para que Magdalena de Ulloa, esposa del mayordomo don Luis de Quijada, se encargase de su educación.