Den spanske okkupasjon i perioden mellom 1580 og 1640 førte imidlertid til at byen mistet mye av sin makt og storhet.