在宽永15年（1638年）加增约2万石，成为3万5千石的大名并移封三河国幡豆郡西尾。在宽永18年（1641年）成为奉行，跟随林罗山开始编纂武家系谱。在宽永20年（1643年）9月完成武家系谱编纂书『宽永诸家系图传』。向第3代将军德川家光献上2部（真名本、假名本）186卷（合计372卷）。在正保元年（1644年）移封至远江国滨松3万5千石。在宽文11年（1671年）隐居。在延宝8年（1680年）1月22日死去。享年81岁。