לאחר שחרורו של אביו היגר ביהם לפריז עם הוריו ואחיו ג'ררד, ושם גודל לאור עיקרי הדת הקתולית. במאי 1940, בעת המערכה על צרפת ועל ארצות השפלה נכלא ביהם האב במחנה המעצר גירס, מכיוון שהיה אזרח גרמני וגרמניה הייתה מדינת אויב. לאחר כניעת צרפת ביוני 1940 השתחרר האב והגיע לשווייץ.