Este clan ocupó la edificación hasta su caída en 1441, cuando fueron derrotados en la Guerra de Kakitsu.