近期的局势感到恐慌，冈崎还称自己昨天才在香港买了新汽车。1941年3月，日本驻港领事矢野称未有通告要撤走在港的日侨，还称离开香港的日侨大部分是从广州出发，只是经香港乘船，又称香港的日侨学校如常上课。不过英日关系在1941年持续恶化，1940年9月日军入侵法属印度支那，之后向法属印度支那的维琪政府施压侵夺英美在当地的资产；1941年7月，英美两国以维护权益为由报复，冻结日侨在两国的资产，香港政府亦跟随英国冻结日本企业及侨民在香港的银行存款，在香港居住的700多名日侨陆续离开香港，不过日本官方否认因战争临近而撤