日本佔领期间的「归乡政策」亦间接使不少香港居民丧失在香港原有的权利。由于早期英国对香港人移民的政策仍然宽松，在1950年代，只要有香港的永久居留权，就可以在英国定居，而当时只要在香港出生，就可得到永久居留权。不过因为日本的归乡政策，不少儿童在战时移居中国大陆（内地）。当他们回到香港之后，有不少人由于各种原因（例如：记录遗失或被烧毁）而未能确认其香港出生地位，被当作在中国内地出生。随着后来英国收紧移民政策，这一部分人亦失去移居英国的权利。当香港沦陷时，中国着名作家张爱玲正在香港大学唸书。她的小说《倾城之