明暦3年(1657年)、34歳の時に旗本安藤彦四郎に招聘され、知行地であった武蔵国那珂郡小平村(現埼玉県本庄市児玉町)に移り住み、知行所代官を務める.
国