Han foretok fra 1801 til 1804 en dannelsesreise gjennom Europa. Han reiste ned Rhindalen med Clemens Brentano, besøkte Germaine de Staël i Coppet, Friedrich Schlegel og hans hustru Dorothea i Paris, og fortsatte sin reise til London og Skottland.