De familia tradicionalmente vinculada a la corte, era hijo segundo de Pedro de Alcántara de Silva Fernández de Híjar y Abarca de Bolea, IX duque de Híjar, caballero del Toisón de Oro, consejero de Estado y presidente de Órdenes, caballerizo mayor de la Princesa de Asturias María Luisa de Parma, y de Rafaela de Palafox y Croy d'Havré, su mujer, hija a su vez del VI marqués de Ariza, que había sido gentilhombre de Cámara del Rey Fernando VI y caballerizo mayor de la Reina viuda Isabel de Farnesio y del Príncipe de Asturias (futuro Rey Carlos IV).