江戸時代に入り藤堂高虎が伊賀に入国した後は、藩主により上野城の鬼門として崇敬をうけ、慶長14年(1609年)に本殿が再興された。