忠日记』）。忠次经由奥三河伊那向信浓侵攻，但对于诹访赖忠和小笠原贞庆等人的离反策略以失败告终。天正12年（1584年）在小牧、长久手之战中出阵，在羽黑之战击退森长可，以家康为主的战斗全部有份参与。天正13年（1585年），在与忠次同为家康宿老的石川数正出奔后成为家康场的第一重臣，天正14年（1586年）10月24日成为家中最高位的从四位下左卫门督。天正16年（1588年）10月，把家督之位让给长男家次后隐居。但是之后在京都被丰臣秀吉赐予京都樱井的屋敷、侍女和在京费用1千石。之后出家号为「一智」天