શોગુનના માણસો હજુ પણ તેને શિકાર કરતા હતા, તેથી સાયગો અમીમી ઓશીમાના નાના ટાપુ પર ત્રણ વર્ષ સુધી આંતરિક દેશનિકાલમાં ગયા.