石码头等地区以及未开通西沙路经十四乡连接乌溪沙、马鞍山等地，这些地区的乡村（如深涌、荔枝庄及榕树澳）和岛屿（如塔门及东平洲）都依赖街渡或渡轮往来大埔滘，而塔门和东坪洲的乡亲会址都座落于大埔四里，故地区行政一直划归大埔区。虽然其后有关街渡改为连接沙田区的马料水，西贡北的行政划分也没有随之而改划入沙田区，使之成为大埔区一个在交通工具上必须绕经外区才能到达的地方。虽然西贡北在行政上隶属于大埔区，但由于地理位置原因，一般民众不会把西贡北视作大埔区的地方，反而会误认为是西贡区的一部分，尤其是连接黄石码头、海下湾和