在柴山西南端的山麓下，南面隔海与旗津岛相望，是一个风景天成的湾澳。而最北端则傍着柴山，是一处由平滩和浅沙所构成的海水浴场，以及以夕阳美景及天然礁石闻名的海湾。在清初时，西子湾也被称作洋路湾、洋子湾或斜湾，而在台语的谐音引申下，斜仔湾逐渐被称为西子湾。大正5年（1916年）时，日治政府在西子湾地区设立寿海水浴场，昭和3年（1928年）再大规模改建。昭和10年（1935年）时，于浴场旁另外兴建温浴场与儿童游泳池。二次大战结束后，台湾政府也自1975年起，开始积极开发西子湾风景区，陆续完成蒋公行馆、海滨公园、