この頃山頂には本社と観音堂を中心に本坊・多宝塔など多くの建物が建ち並び、修験も十七坊(時代によって増減あり、三十六坊の時期もある)あったと伝えられる。