介入关东地方与后北条氏对立后，义氏经常游走于与古河无关的地方，而按《》记载，义氏是「御家人 葛西大人」（）。元龟元年（1570年）左右，后北条氏与上杉氏缔结，作为条件之一，谦信承认义氏的地位。作为古河分方的义氏终于能够重返古河，然而却附带由氏康之子北条氏照担任其后见人的条件，因此义氏仍然是后北条氏的傀儡。天正11年（1583年）1月21日，义氏死去，享年43岁，法号长山善公香云院。由于他的嫡子梅千代王丸早死，因此古河公方的家臣便拥立梅千代王丸之姊为古河城主。后来，丰臣秀吉为免足利氏绝后，让氏姬与