挂念参与了东军。在战役中细川忠兴抵挡石田三成部属岛左近的部队，战后被家康分封于丰前国的小仓合共三十九万六千石。1614年参加大坂之战，在平野与丰臣军交战。1619年决定剃发为僧，并改称三斋。
晚年.1620年将家督的位置交给三男忠利。1632年当忠利被移封到熊本54万石的时候，在「隐居」（过退休生活），在1646年于八代城病死，终年八十三岁。他的墓地在熊本市黑髪町泰胜寺以及在京都大德寺高桐院。1924年（大正13年）11月10日赠正三位。