加治田城が森氏により廃城後、長沼三徳と共に加治田城衣丸(絹丸村)にて、斎藤利治の遺児である斎藤義興・斎藤市郎左衛門を養育。