ただし、ナチスの台頭により状況が変化してゆく。彼はユダヤ人ではなかったものの妻はユダヤ系であり、またユダヤ人の友人も多くいた他、同時代の音楽作品を「退廃音楽」と呼び弾圧するナチスの台頭を非常に警戒していた。1933年2月27日のドイツ国会議事堂放火事件、翌年11月30日のベルクの「ルル組曲」（未完に終わった同名のオペラの素材を使った交響的小品集）初演に対する禁止令は、彼にドイツ脱出の決心を固めさせるのには十分であり、禁止令が出た5日後にベルリンの職を辞任。翌1935年のザルツブルク音楽祭出演の後、妻と当時5歳のカルロスらを伴ってアルゼンチンに移住した。