72年（明隆庆六年）起，葡萄牙每年缴交的地租银更由香山县代为征收。1730年（即清雍正八年），两广总督郝玉麟奏请添设香山县丞一员，专察理华人与葡萄牙人之间之事务和纠纷。结果在1731年，县丞衙署设立，最初驻扎于前山寨。1743年（干隆八年），两广总督策楞在处理一宗葡萄牙人杀害华人之案件后，便上疏清政府加强防范。1744年，县丞衙署由前山寨移至澳门的望厦村，隶属于澳门海防军民同知，加强对澳门事务的管理。1849年，澳门总督亚马留为扩张地界，将县丞衙署连同《澳夷善后事宜条议》石碑拆毁，县丞及官员被迫迁至前山