しかし、関ヶ原合戦後に岩城氏は追放され、代わって徳川譜代の鳥居忠政が入ると、慶長7年（1602年）に現在地である八幡小路（福島地裁いわき支部の近く）に飯野八幡宮は移設され、移設後の飯野八幡宮跡地に磐城平城が建設された。なお、安藤氏が磐城平藩主だった時期（1756年 - 1868年）には、八幡小路に藩校施政堂が立地していた。