El vertiginoso ascenso familiar fue acompañado asimismo por la elevación del señorío a Condado de Alba de Tormes en 1439 y finalmente transformado en Ducado de Alba de Tormes desde 1472, título nobiliario otorgado por el rey Enrique IV a favor de García Álvarez de Toledo y Carrillo de Toledo, el I duque de Alba.