帝在南岳衡山敕建上封寺。武德初年，南岳建司天霍王庙，为南岳有庙祀之始。玄宗开元十三年（725年），修建南岳真君祠，现南岳大庙。三年后，南岳庙遭受特大火灾，火灾波及南岳镇三百余家。南宋时期，胡安国父子及其弟子朱熹、张栻在南岳建春秋楼讲学，开创湖湘学派。
民国时期.抗日战争全面爆发以后，国民政府军事委员会一度迁到南岳。1938年11月，国共两党共同创办“南岳游击干部训练班”，本部就设在集贤峰白龙潭的南岳圣经学院。1940年，湖南省军政首领赵恒惕开始在南岳主持修建忠烈