Etter krigen trakk Scavenius seg tilbake fra det offentlige liv inntil sin død i 1962. Fra 1914 til 1946 var han eier av Voergaard slott. I 1948 utga han , der han forsvarte sin politikk; i 1959 utga han .