Durante las diversas conquistas y reconquistas de Menorca que se sucedieron durante el siglo XVIII el castillo de San Felipe fue mandado demoler por el rey Carlos III, quien razonó que si tal joya de la ingeniería militar dejaba de existir, los ingleses dejarían de apetecer Menorca.