男秀宗的阵中，翌年（1615年）2月，秀宗被赐予伊予国宇和岛藩10万石，纲元与良纲一同赴往宇和岛并在宇和岛藩的统治机构中工作，在同年4月的大坂夏之阵从宇和岛城中出阵。元和4年（1618年），宗纲死去，为了凭弔宗纲的菩提而入道并以了庵高吽为法号，前往高野山成就院并进行三年供养。归国后，拜领政宗下赐的宫城郡下爱子的栗生的馆，以后就居住这里。在宽永13年（1636年）5月24日政宗死去后远离政务，把栗生的馆让给五郎八姬并在文字（之前的领地）中隐居。在翌年于同地兴建洞泉院，在境内建立政宗的阿弥陀堂、宗纲的妙觉堂