Місцеві жителі зустріли японців підозріло, а команда навіть не було грошей на готель. Капітан «Кайнан-мару» Номура вирушив на батьківщину для збору коштів і закупівлі нової партії їздових собак. З ним вирушили кілька членів команди, які не витримали випробувань. Люди, що залишилися в Сіднеї, в буквальному сенсі слова жебракували, а в пресі друкувалися знущальні матеріали про «жовтих горил, які взялися за підкорення Південного полюса». В Австралії значну допомогу експедиції надав сер Вільям Еджворт Девід, учасник першої експедиції Шеклтона, підкорювач Південного магнітного полюса, який перебував тоді на посаді президента австралійського Товариства сприяння розвитку науки. Він опублікував статтю про експедицію в місцевих газетах, влаштовував екскурсії на «Кайнан-мару» для збору коштів, допомагав порадами, а також надав власний сад для розбивки наметового табору японської експедиції. Сірасе подарував йому фамільний меч XVII століття, який зберігається нині в Австралійському музеї.