扇谷上杉家と共に武蔵国を割拠していたが、扇谷上杉家の上杉朝定が北条氏康に敗れ滅亡し、後北条氏の勢力が武蔵に及ぶと、憲英から数えて7代目の憲盛の代に、後北条氏に降伏した。
与扇谷上杉家一同在武藏国割据，但是上杉朝定在败给北条氏康后灭亡，后北条氏的势力延伸至武藏，由宪英开始后7代‧宪盛一代时降伏于后北条氏。