El castillo sobrevivió la Restauración Meiji, pero gran parte de éste fue destruido durante los bombardeos de las fuerzas norteamericanas durante la Segunda Guerra Mundial.