Su fábrica se asentó sobre las ruinas de una fortaleza romana del siglo IV, que remataba sobre la bahía las antiguas murallas del mismo origen, que circundaban la Puebla Vieja de Santander.