4年衡阳保卫战后，日军占领衡阳，回雁峰上的古林殿阁惨遭焚毁，仅存一座寺门和半间佛殿。回雁峰所在区原名叫“城南区”，2001年4月4日，经国务院批准（国函[2001]34号），改名叫“雁峰区”。
景点.主条目：回雁峰公园 、雁峰寺、王船山出生地纪念馆回雁峰上重修望岳台、雁峰寺，复原观天池、此君轩。峰顶新建曲廊、雁壁、雁亭、碑廊、茶榭、寿佛殿、观音殿等。回雁峰公园：1964年，中南局第一书记陶铸视察衡阳，倡导将回雁峰旧址修复为公园，但因文化大革命而停建。1983年—1985年