首置江州，庐山隶属江州浔阳郡柴桑县。

王羲之任江州刺史，于庐山南麓金轮峰下建别墅，后舍为归宗寺，有墨池，鹅池等遗迹，归宗寺为已知的庐山最早的寺院。

陶潜出生于柴桑县，故里在庐山南麓玉京山。

陶范建西林寺，由慧远主持。

慧远至庐山，建龙泉精舍。

桓伊建东林寺，请慧远主持。

慧远与刘遗民等123人立誓共生西方净土，“同修净土之业。“

慧远撰《沙门不敬王者论》，论证佛教实际上是支持王者的。桓玄控制政权，下令沙汰沙门，唯庐山除外，不予“搜简“。

桓玄平乱，安帝自江陵返京，路过江州，遣使劳问慧远。陶潜辞彭泽令，归隐庐山，赋《归去来辞》，与刘遗民，周续之称为“寻阳三隐“。与此同时，有寻阳人翟汤、翟庄、翟矫、翟法赐祖孙四代先后隐居庐山。

卢循农民军十余万众驻江州，卢循见慧远于东林寺，刘遗民卒于庐山。

慧远（334－416年）于庐山逝世。有《庐山集》十卷。据慧远助其弟子在庐山建龙池、清泉、龙泉、圆觉、中大林、上崇福、上化成、天池、多佛、高良诸寺，周景著《庐山记》，著作年代不详。

刘裕杀晋安帝，征陶潜为著作郎，不就。