羽生城
天文21年(1552年)頃に作成された『小田原旧記』によれば「当時武州羽丹生御城代 中条出羽守」とあり、この時期に後北条氏の攻撃を受けて落城し、中条出羽守が城代を務めたと考えられる。一方、城を追われた直繁らは他の土地に移り住んだとも、小松神社(後の羽生市小松)付近に移り住み、一時的に後北条方に従属したとも考えられる。
永禄3年(1560年)、越後国の長尾景虎(後の上杉謙信)が常陸国の佐竹義昭の要請により関東出兵を実施すると、かつて上杉氏の配下にいた多くの家臣が景虎の下に参陣した。直繁はこの機会に羽生城の中条出羽守を攻めて城を取り戻し、弟の河田谷忠朝は配下の渋江平六郎や岩崎源三郎と共に景虎の下に参陣すると、同年11月12日(1560年11月29日)に、景虎から羽生城および羽生領を安堵された。この後、武蔵国の武将の多くが後北条方に従属していく中で直繁・忠朝兄弟は一貫して上杉方に属し、抵抗を続けることになった。
永禄4年(1561年)、謙信が成田氏の本拠である忍城の支城・皿尾城を奪取すると、忠朝を配置した。忍城主・成田長泰は前年の謙信の関東出兵の際には謙信の下に参陣したが、すぐに北条氏康に従属しており、長泰の動きを牽制する狙いがあった。この後、皿尾城をめぐり二度に渡り攻城戦が繰り広げられたが、忠朝は岩付城主・太田資正の加勢もあり、これを退けた。
永禄12年(1569年)閏5月、武田信玄の関東出兵により謙信と北条氏康の間で同盟(越相同盟)が結ばれ、上杉方は協定により上野国、武蔵国の羽生領、岩槻領、深谷領などの領有が認められた。