しかし延宝7年（1679年）、当時館林藩主だった徳川綱吉の怒りにふれた父が江戸から放逐され、それによる蟄居にともない、14歳にして家族で母の故郷である上総国長柄郡本納村（現・茂原市）に移った。
延宝七年（1679），其父因惹怒了德川纲吉被判放逐，荻生一家也被迫从江户搬迁至其母的故乡上总国长柄郡本纳村（今：茂原市）。