Fue en ese contexto que se construyó la Fortaleza del Cerro, iniciado en 1809, con el objetivo de proteger el faro recién instalado (que se encuentra a 148 metros encima del nivel del mar), y de reforzar las defensas de la ciudad después de las Invasiones Inglesas.