En 1181, fue derrotado en la Batalla de Sunomatagawa por Taira no Tomomori; huyó, y trató de resistir destruyendo el puente sobre el Yahagi-gawa, y formando un muro de escudos.