永禄10年(1567年)、輝虎は再び背いた佐野昌綱を降伏させるため唐沢山城を攻撃、一度は撃退されるも再び攻め寄せ、3月に昌綱を降伏させた(唐沢山城の戦い)。