Durante la Segunda Guerra Mundial muchos castillos fueron destruidos durante los bombardeos en las regiones de la costa del Pacífico y sólo algunos castillos ubicados en áreas remotas, como el Castillo Matsue o el Castillo Matsumoto permanecieron intactos.