続いて、藤原広嗣の屋敷跡ともされる現在地に大同元年(806年)に移転し、新薬師寺の鎮守社とされた。