永徳元年(1381年)には本堂が再興されるが(文明14年・1482年の勧進帳)、応永5年(1398年)に焼失するなど、再興と焼失を繰り返すが、以後、最盛期の規模が復活することはなかった。