Beim Kantō-Erdbeben 1923 und im Zweiten Weltkrieg wurden Gebäude zerstört oder beschädigt. 1946 wurde der Park der Stadt übertragen, die ihn weitgehend restaurierte. 1952 wurde die (ursprüngliche) Anlage zur besonderen historischen Stätte ("tokubetsu shiseki") erklärt.