Su nombre proviene del ducado de Alba de Tormes, título de nobleza con Grandeza de España otorgado a los Álvarez de Toledo, perteneciente al linaje de la Casa de Toledo, denominación más conocida de la Casa de Álvarez de Toledo.