国继任领事后，重提建馆一事，于1844年11月6日与清政府部分地方官员会谈。最终双方达成协议，同意英方选择遭兵燹夷平的兴泉永道署余地建馆。清朝方面垫付9000银元，而英国每年将支付900银元作为租金。道署被英国占据后，道台迁至闽海关厦门正口衙门（今江夏堂一带）办公。
归还清廷.1862年4月海关税务司成立，厦门海关及港口交由外国人管理。同治二年四月（1863年），英国归还道署。原闽海关衙门改建海关大楼。同治三年（1864年），道尹曾宪德等及厦门士商捐款“召工削平洋楼”，重建道署