秀忠把将军一职让给长子德川家光，自己效法父亲家康成为大御所退后掌握实权，在江户城进行二元政治。最初是考虑隐居小田原城遥控政务，但最后是居住在江户城的西之丸(现在的皇宫所在)。1631年，因次子德川忠长多有乱行，命他隐居。从此之后身体健康状况日益不佳，宽永九年正月二十四日（1632年3月14日）德川秀忠病逝于江户城西之丸殿内，享年五十三岁，安葬于东京增上寺。法号台德院，追赠正一位。
特征与评价.根据德川实纪所示，排行老三的秀忠比起其他兄弟来说是唯一个性温厚、具有文人气息的子嗣。