En 1565 se declararon vedados los terrenos pertenecientes a la caleta de Guillén (más tarde conocida como caleta de San Lázaro) y se inició el sistema de fortificaciones, que permitió la edificación del pequeño vigía Torreón de San Lázaro en 1665, hoy símbolo municipal en los primeros años de la colonia.