山于康熙二十三年（1684年）划属诸罗县。雍正元年（1723年）改隶新成立的彰化县。九年（1731年）改隶新成立的淡水厅。光绪元年（1875年）设立台北府，改隶新成立的新竹县。十一年（1885年）设立福建台湾省，台北府位于其辖区内。清代香山庄隶属于竹北一堡。该庄北及东北隔三姓公溪与浸水庄、牛埔庄为界，东与香山坑庄为邻，东南边及南边为海山罟庄，西边临台湾海崃。
日治时期.明治二十八年（1895年）台湾进入日治时期，香山划属于台北县新竹支厅竹北一堡。三十年（1897年）改隶新竹县。