建立起“应禅寺”，后来改名“三塔寺”。唐武宗会昌年间，朝廷曾一度灭佛，时间长达两年，灵祐禅师不得不遣散僧众，过着自耕自食的生活。唐武宗时宰相裴休因谏直言，被贬为湖南都团练守捉观察处置使、潭州刺史。来到宁乡县沩山居住，和灵祐禅师交好，亲自书写了《大藏经》，849年得到唐宣宗敕封“密印禅寺”匾额。“密印”源出古印度密教：“口诵真言，手结契印，心作观想，三密相印，即可成佛”。灵祐禅师后来在江西宜春仰山传法布道，创建了“沩仰宗”。唐宣宗大中三年（849年），宰相裴休捐建密印寺。裴休的二公子裴文德当初代替