1935 verlegte Toerring-Jettenbach den Sitz der Familie in München vom Palais Toerring am Karolinenplatz in die Cuvilliesstraße 8–10. Anschließend wurde das "Toerring-Palais am Karolinenplatz" in die Partei-Kanzlei der NSDAP integriert. Sein Schwager, Prinzregent Paul von Jugoslawien, machte im Juni 1939 einen Staatsbesuch im Deutschen Reich. Nach den Aufzeichnungen von Juan de Borbón y Battenberg trafen sich die Toerrings am 2. Juni 1939 bei Christoph von Hessen-Kassel (* 14. Mai 1901; † 7. Oktober 1943), dem Leiter des Forschungsamts im Palais Bellevue (Kassel) zu einem Abendessen. Prinzregent Paul unterzeichnete am 25. März 1941 den Dreimächtepakt in Wien.