El condado de Gelves, quedó en una rama de los Fitz-James, aunque tres generaciones más tarde se unió a la Casa de Alba, en la persona de Carlos Miguel Fitz-James Stuart y Silva, XIV duque de Alba etc.