1840年，鸦片战争爆发后英军占领厦门。道署在战争中焚毁。魁星山日渐荒废。
石刻兴起.同治十年（1871年），时任道尹潘骏章写下题刻（下文第2处），文中“曾公”即指曾宪德。时值曾宪德树被朝廷免职，“开缺送部引见”。后太平军李世贤威胁厦门，左宗棠任闽浙总督，要求曾宪德重新上任督办此事。曾宪德设计除掉与李世贤勾结的外国人柏威林。同治五年（1866年）朝廷要求对兴泉永道一职“于通省道员内拣员调补“，左宗棠推荐曾宪德，称他“年壮才明，安详干练，治匪辑盗，动合机宜。其于中外交涉事件，尤能