Durante mediados del siglo XIX, el poder del "shōgun" decayó notablemente y surgieron numerosos movimientos pro-imperialistas en el país, por lo que muchos castillos fueron nuevamente convertidos en bases militares y algunos fueron incendiados durante las revueltas.