达到顶点，有“无徽不成镇”、“徽商遍天下”之说。然而，嘉庆道光之后，徽商初步衰落。清末的太平天国战争，对包括徽州在内的皖南地区破坏巨大，人口锐减，经济衰退。
民国后.中华民国元年（公元1912年）废府留县后，徽州府所辖各县直属安徽省。1932年5月，安徽省将全省划为10区，按清末府州旧制，实行首席县长制，徽州六县为第十区。1934年，婺源县划归江西省管辖。抗战胜利后，原徽州各县为第七区，专署驻休宁县屯溪镇。同时，经过原属徽州各县士民及旅外知名人士的不懈努力，婺源县重新划归安徽省第七