I 1920 ble erkebiskop Eugenio Pacelli, den pavelige nuntius til Bayern (og fremtidige pave Pius XII), også utnevnt til apostolisk nuntius til Tyskland. I forbindelse med denne nye embede spurte han kardinal Adolf Bertram av Breslau om å hjelpe ham med eksperter som kunne agere som forbindelsesmenn fra nuntiaturet i München og de prøyssiske katolske biskoper. Bertram foreslo Kaas, som i sitt akademiske virke hadde utviklet en særlig ekspertise på forholdene mellom staten og den katolske kirke.