En 1630 el gobernador Juan de Eulate recomendaba a la Corona la construcción de una fortaleza que protegiera Pampatar; esto no se iniciaría sino hasta 1669 cuando el gobernador Martín de Tellechea comenzó a construir el castillo de San Carlos Borromeo.