Katsuyori perdió el Castillo Takatenjin en 1581 por lo que clanes como el Kiso y Anayama le retiraron su apoyo.