Британский Гонконг
Когда Бай Сянь-юну было 7 лет, врач диагностировал у него туберкулёз, мальчик не мог ходить в школу, поэтому большую часть своего детства он провёл в одиночестве, находясь на домашнем лечении в Гуйлине. Когда разразилась Японо-китайская война, он и его семья отправились в Чунцин, а после капитуляции Японии в 1946 году переехали сначала в Шанхай, а затем в Нанкин, где Бай учился в Наньянской образцовой начальной школе. В 1948 году семья переехала в Британский Гонконг, и Бай перешёл в начальную школу Коулун Тонг (Kowloon Tong School), а затем в католическую школу для мальчиков «Колледж Ла Салля» (La Salle College). Вскоре после поражения Гоминьдана в гражданской войне между Гоминьданом и Коммунистической партией он перебрался на Тайвань в 1952 году.