是同年7月在岩付城被扇谷上杉氏的援军甲斐武田氏进攻，向扇谷上杉氏降伏，返回上杉家。对此，北条氏纲援助先前没落的原元岩付城城主、涉江氏一族的涉江三郎，并进攻岩付城，大永5年（1525年）2月资赖方有约3千人战死，最终岩付城被攻陷，资赖退到足立郡石户城。享禄4年（1531年）9月，讨取涉江三郎并夺回岩付城。在天文2年（1533年）隐居，把家督之位让给嫡子资显。有说法指资赖晩年时，因为家督资显倾向亲北条氏路线，因此而被疏远。天文5年（1536年）4月20日死去，享年53。法名是寿仙院殿智乐道可庵主。