年十一月初一（1643年12月21日）突然被流放到甲斐国天目山，原因有醉酒、介入江户幕府朝廷的寺院等。后来幽闭在甲府兴因寺（甲府市下积翠寺町）。万治二年（1659年）受勅许回京，居住在知恩院泉涌寺，并于北野还俗隐居，号心庵。去世后，葬于泉涌寺，赠谥号专莲社行誉心阿自在良尚大僧正。明和五年（1768年）在他的百年忌辰是恢复他的名誉，改谥无碍光院宫良纯大和尚。