南城门楼改称奉国军楼。南宋初年，宋高宗为逃避金军追击，曾暂驻奉国军楼。为感念门楼中供奉的张巡、许远等将军保佑，敕封奉国军门楼为“奉国军楼神祠”。元代初年，门楼和中国其他城楼一样被拆除，至至治元年（1321年）重建，名为明远楼，至元末毁于方国珍起义军。明宣德九年（1434年），城楼由时任太守黄永鼎重建，并在城楼南面题名“四明伟观”，北面题名“声闻于天”。万历十三年（1585年），城楼倾圮，太守蔡贵易重建城楼，并起名“海曙楼”。根据沈一贯《海曙楼记》，楼名来自沧海为曙的典故。至清干隆四十七年（1782年），