また、それ以前にも1937年にはニューヨークのカーネギーホールに出演しアメリカデビューを果たし、1939年のシーズンにはプッチーニの『ラ・ボエーム』でロドルフォを演じ、ベルギーのブリュッセル・リエージュ・ヘント・アントウェルペン・オーステンデなどの劇場を廻り24回ステージに立った。ベルリンを追われてからは、その活躍の場をウィーンへと移したが、1938年の独墺合邦によって再び活躍の場を失い、1940年に南フランスのニース近郊へと居を移す。1942年5月のフランスのアヴィニヨンにおける出演が最後のステージとなった。しかし、ナチス・ドイツの侵攻はフランスにも及ぶところとなり、アメリカのエージェントがキューバへの脱出を図るための手配を進めたが戦禍にあって捗らず、1942年3月に出国査証がポルトガルの領事館から発行されたもののフランス政府によって出国を阻まれ、居場所を失ったヨーゼフはスイスへ密入国した。しかし、1942年10月9日、スイス当局によって、正式な政治亡命手続きを行ったユダヤ人ではないとして身柄を拘束され、チューリッヒ郊外のギレンバート収容所()に拘留された。