A la edad de seis años, Inoue fue enviado casa de su abuela, una antigua geisha.