田家中混乱，北条氏趁机夺回上野，并入侵甲斐、信浓（天正壬午之乱）。政繁是信浓小诸城主，在最前线与德川家康对峙。后来北条与家康和谈成立，政繁退出信浓。天正18年（1590年），丰臣秀吉的小田原征伐开始，政繁担中山道入口上野松井田城的守备，于碓冰峠迎撃前田利家、上杉景胜、真田昌幸等大军，终因兵力劣势而败北。最初有笼城及战死的觉悟，后因水脉被截断及兵粮被烧毁，在敌军攻入本丸时，开城降伏。之后加入丰臣方参与忍城攻略，5月22日武藏松山城、6月14日钵形城及6月23日八王子城等北条氏据点的攻略都有参与。尤其八