Toyotomi Hideyoshi ganó el control del castillo en 1590 y lo dejó al mando de Yamanouchi Kazutoyo, quien efectuó una serie de renovaciones que se conservan hasta nuestros días.