Sus abuelos paternos fueron el asturiano, Diego Fernández Vigil de Aller, y Leonor Suárez de Quiñones, y los maternos Fernán Álvarez de Toledo y Meneses, II señor de Valdecorneja, y su esposa Leonor López de Ayala, señora de Torrejón de Velasco.