Imagawa Ujichika construyó el castillo original alrededor del año 1525.