大历三年(768)，杜甫流寓长沙时，曾游该寺，作有《岳麓山道林二寺行》，留下“玉泉之南麓山殊，道林林壑争盘纡”之名句