万7千石，被允许复归。庆长19年（1614年），在大坂之阵中被任命守备甲府城，长男忠赖率军出阵。因为在冬之阵时被命令留守在城中等，因此在夏之阵时，请求向大坂从军，不过没被允许，在夏之阵时亦负责守备甲府城。元和2年（1616年），负责软禁被改易的松平忠辉，此后由诹访氏负责照顾忠辉，直至忠辉死去。宽永11年（1634年），受到第3代将军德川家光邀请参加宴会，得到深厚信任。宽永17年（1640年），把家督让予忠赖（忠恒）并隐居，于翌年（1641年）1月14日死去。享年72岁。