En 1871 con la abolición del sistema han, todas las estructuras del castillo fueron desmanteladas con la excepción de la puerta norte, una "yagura" (o torre) y el foso.