禄6年（1563年），辛垣城被攻陷（另说为永禄4年或永禄5年説），此后前往岩槻城投靠太田资正，并在同地自杀。享年73岁。嫡男十五郎和次男喜藏被交託予家臣，十五郎在永禄6年（1563年）死去，喜藏在永禄7年（1564年）死去。一说指还有一子五郎太郎，在元龟3年（1572年）于伊豆国自杀。