Al morir este sin dejar descendencia, el señorío pasó a manos de su sobrino Fernando Álvarez de Toledo y Sarmiento, señor de Valdecorneja, a quien el propio Juan II nombró en 1438 conde de Alba de Tormes, por los servicios prestados a la corona.