光二十年（1840年）大型船只已无法进入。于是至道光五年（1825年）开辟香山为港口，因其位置接近福州府，而成为重要的货物集散中心。香山于康熙二十三年（1684年）划属诸罗县。雍正元年（1723年）改隶新成立的彰化县。九年（1731年）改隶新成立的淡水厅。光绪元年（1875年）设立台北府，改隶新成立的新竹县。十一年（1885年）设立福建台湾省，台北府位于其辖区内。
日治时期.明治二十八年（1895年）台湾进入日治时期，香山划属于台北县新竹支厅竹北一堡。三十年（1897年）改隶新