Aux et , la forteresse est définitivement abandonnée lors de la croissance économique et démographique de la ville qui compte en 1595 habitants, principalement d'origine mauresque. Leur expulsion en 1609 entraîne une double crise économico-démographique qui perdure jusqu'au . Lors de la guerre de Succession espagnole, la ville passe sous le contrôle de l'archiduc Charles (en 1703).