だが、謙信が藤氏を残し越後に帰国すると直ちに北条氏は反撃を開始し、その年の10月には古河を攻撃したので、藤氏は里見氏家臣の多賀信家（蔵人・高明）が治める上総池和田城（千葉県市原市）へ逃れた。
不过，在谦信留下藤氏并返回越后的同时，北条氏马上开始反撃，在同年10月攻撃古河，藤氏逃到里见氏家臣多贺信家（藏人、高明）管治的上总池和田城（现今千叶县市原市）。