קלרקסון תיארה את אחד מזכרונותיה המוקדמים ביותר כרגעי מסתור בכמה מרתפים בהונג קונג במהלך הפלישה היפנית לאי בשנת 1941. בזכות קשריו של אביה עם הממשלה הקנדית, הוא קיבל הזדמנות בשנת 1942 לברוח מהכיבוש היפני לקנדה, כחלק מהחזרתם של עובדי הממשלה הקנדים מהעיר שנפלה לידי האימפריה היפנית. אף על פי כן, חוק ההגירה הסיני 1923, מנע את כניסתם המידית של משפחת פוי למדינה, עד שהמחלקה לענייני חוץ של קנדה התערבה ודאגה להכניס את משפחתה של קלרקסון לקנדה. המשפחה השתכנה באוטווה, אם כי ויליאם איבד כמעט את כל הונו, ומשפחתו התגוררה בדירה צפופה. קלרקסון למדה בבית הספר הציבורי שבעיר, ובאוקטובר 1951 צפתה עם כיתתה בביקורה של הנסיכה אליזבת, הדוכסית מאדינבורו (לימים המלכה אליזבת השנייה), כאשר שיירתה המלכותית עברה בעיר.