A la muerte del Conde-duque sus propiedades se dividieron entre su hija legítima y su hijo ilegítimo, recibiendo la primera el mayorazgo de la Casa de Olivares mientras que el segundo recibió los señoríos y títulos que el Conde-duque obtuvo en vida, conocidos como Casa de Sanlúcar la Mayor, que más tarde pasó a los Condes de Altamira.