Після битві при Секіґахарі замок перестав бути володінням князя Токугава, і з 1601 року по 1638 рік належав Огую Даймьо, з 1638 року до 1702 року — клану Ніва, а з 1702 року до кінця періоду Токугава в 1868 році замком володів клан Ісікава.