I 1912, mens de bodde i Chigasaki, ble Noguchis halvsøster, Ailes født, uten at navnet til faren noen gang er blitt kjent. Da Léonie fikk bygd et hus til familien, fikk åtte år gamle Isamu lov til å bestemme hvordan hagen skulle se ut. For å utvikle sine kunstneriske evner, gikk han i lære hos en snekker i nabolaget. Men i desember 1917 flyttet familien på nytt, denne gangen til et område i Yokohama med mange utlendinger.