Beberapa bulan selepas dilahirkan, Perang Dunia Kedua telah meletus. Jepun telah menyerang Malaya dan menyebabkan keluarga S.H Alattas berpindah ke Kuala Terengganu.