镇北门上兴建砲台，而在日治时期，日治政府除军事设施如碉堡及防空洞外，在柴山的开发则是以游憩为主，包括寿山公园、西子湾海水浴场以及神社（今忠烈祠）。1941年（昭和十六年）时，日本开始将台湾当作南进的基地，这也使柴山的军事功能在更进一步被强化，现在的高雄港即是为因应南进而扩建，而另一边的万丹港则成为后来转为军事用途的左营军港及海军左营基地，这也使得柴山旁的桃子园聚落因此被迫迁村。当时柴山的军事管制范围包括神社以北的区域，管制区内禁止绘图摄影，也进一步确立了柴山的军事地位。在九一八事变之后，柴山更进一步要塞