护上杉氏和守护代长尾氏对立，于是成为室町时代至日本战国时代中期令越后政情不稳的要因之一。在上杉定实的养子问题（天文之乱）中，支持定实的中条藤资与反对定实的本庄房长、色部胜长、鲇川清长连合军争斗，于是亦令扬北众分裂，独立性开始衰退。不久后，在长尾氏成长为战国大名时，被整合到长尾氏家臣团中。不过即使在上杉家臣团中，仍有独特存在感和强大军事力，根据军役帐等记录，扬北众大约佔有上杉军全部兵力的3成。特别是在第4次川中岛之战中，因为表现活跃，色部胜长、安田长秀、中条藤资、垂水源二郎（荒川长实）等4名武将被上杉谦信赏赐