以东的土地持续征战十二年。义元遂与武田家武田晴信、扇谷上杉家上杉朝定、山内上杉家上杉宪政联合轮番攻击北条家，成功地遏制了北条家的攻势，使北条军势在骏河东边的国境撤退回相模，义元成功的支配了骏东、富士二郡。天文十四年（1545年）十月，义元在骏河东部富士郡与北条氏康对阵之际，关东管领山内上杉家第十五代当主上杉宪政，联合扇谷上杉家末代家督上杉朝定及末任古河公方的足利晴氏，集结号称八万大军，包围仅有三千北条军驻守的河越城。义元是为了夺回之前被北条氏纲占据的骏河东部而出兵（第二次河东之乱）。氏康自骏河快速退兵之