聚徒，疑萌不利」，最初贬到弋阳，后至武当，又移到荆州。安史之乱（755年—763年）时，郭子仪带兵征讨，迫需军饷；右仆射裴冕建议，通令全国郡府收取香油钱（香水钱）以助军需。神会不忍苍生遭劫，为筹备军费而四处奔走、声援朝廷，将所获供养金钱悉捐为军饷之用。唐肃宗感念其功德，诏请神会入宫接受供养，并在荷泽寺内建立禅宇。唐宗密《圆觉经大疏钞》卷三之下《神会七祖传》记载，在天宝四载（745年）兵部侍郎宋鼎从南阳迎请神会到洛阳荷泽寺。天宝十二载（752年），御史卢奕诬奏神会聚众阴谋作乱，神会被朝廷放逐到外地，经弋阳