En 1645 se le privó del Señorío de Sanlúcar, que revirtió a la Corona, y de la Capitanía General del Mar Océano y Costas de Andalucía, que pasó al duque de Medinaceli, que era conde de El Puerto de Santa María.