Como el hermano mayor a Diego fue el IV duque de Alba, Fadrique Álvarez de Toledo y Enríquez de Guzmán, (1537 - 1585) y no tuvo descendencia adulta pese a casar tres veces, sería el hijo del duque consorte de Huéscar, Diego, casado con Brianda de Beaumont y Folch de Cardona, el conocido como Antonio Álvarez de Toledo y Beaumont, duque de Huéscar por su madre, quien sería también, por su tío por línea paterna, a los 17 años, duque de Alba desde 1585, (1568 - 29 de enero de 1639), II duque de Huéscar, VI conde de Lerín y condestable hereditario de Navarra, conde de Salvatierra, marqués de Coria y grande de España.