山中隐居，作《归去来兮辞》。412年，高僧慧远于山中逝世。467年，陆修静上山修道，住太虚观。483年，祥符观于紫霄峰麓建成，之后，栖贤寺和先天观（景德观）也分别于489年和536年建成，山上道教文化兴盛。
隋唐.589年，隋平陈后，将柴桑县改称寻阳县，庐山属寻阳县，南唐时又归属德化县。683年，白鹤观于五老峰下建成。742年，为纪念传说中的仙人框俗，山中兴建了广福观（或称“匡群庙”）。750年，高僧鉴真至东林寺，为志恩禅师授戒。756年，诗人李白由安徽宣城来到山上，着有《望庐山瀑