临烝县为衡阳县，州、县城均设湘江东岸。大业三年改为衡山郡，治所衡阳。唐朝：武德四年，设衡州。764年，唐朝设置湖南观察使。这是历史上最早出现“湖南”之名，湖南观察使驻衡州。天宝、至德年间曾复为衡阳郡。衡州属江南西道。宋朝﹕为衡州，别名衡阳郡，属荆湖南路。为湖南提刑司治所。元朝：设衡州路，改置衡州路总管府，在衡州设湖南宣慰司，隶属湖广行省。元贞元年（1295年）衡永郴桂诸路人民抗粮、抗丁，起义频繁，朝廷于衡州设行枢密院。明朝：洪武初，改衡州府，隶属湖广行省。下辖衡阳县、衡山县、耒阳县、常宁县、