天正6年（1578年），在谦信死后，出家并号安艺入道芳林。在御馆之乱中，与儿子景广一同支持上杉景虎，与上杉景胜战斗，不过被攻陷，以及景广战死。天正7年（1579年）8月，投向武田胜赖（一说实父北条高定亦被景胜杀死）。天正10年（1582年）3月，在武田氏灭亡后，仕于泷川一益。在一益于神流川之战中战败而失势后，从属于北条氏。同年12月，拒绝向的真田昌幸出兵，并归顺上杉氏，进攻北条方的那波显宗。对此，北条氏在压制箕轮城后，不只是北条氏邦，连当主北条氏直亦亲自出阵进攻厩桥城，因此不能抵抗而降伏。天正11年