しかし宝永5年(1708年)の宝永の大火、天明8年(1788年)の天明の大火と度々火事のため焼失してしまう。