En 1647 Felipe IV le permite nombrar alcalde mayor, pero cinco años más tarde la entrega al Conde Duque de Olivares, cuyo heredero, el marqués de El Carpio, la vende en 1677 a los marqueses de Almodóvar, más tarde señores de La Rambla.