Fue el cuarto y último hijo del II conde de Oropesa, Francisco Álvarez de Toledo y Pacheco, y de María de Figueroa y Toledo —primogénita de Gómez Suárez de Figueroa, II conde de Feria, y de su segunda esposa, María Álvarez de Toledo, hija de los I duques de Alba de Tormes—.