Vitalis Pantenburg var gift med forfatteren og oversetteren Lieselotte Kattwinkel, med hvem han ofte la ut på lange reiser. Som i førkrigstiden bodde paret i Sør-Köln, siden 1938 i Rodenkirchen, fra slutten av 1950-tallet i Hahnwald. Under en seks måneder lang studiereise til Canada, som Pantenburg i 1949/50 foretok som medarbeider ved Kiel-arkivet for polarforskning sammen med sin kone, kjørte de 30.000 km med bil. Paret var blant de første tyskerne som besøkte landet etter andre verdenskrig. Det faktum at de kanadiske myndighetene hadde utstedt visum til den tidligere nazi-spionen Pantenburg, var i 1952 et punkt på dagsordenen i en debatt i det kanadiske underhuset. Med materialet tatt opp under reisen ble blant annet kulturfilmene Neuland i Nord-Amerika og Her begynner verden på nytt laget. Pantenburgene beskrev sine reiseopplevelser i den i 1954 utgitte bildeboken Her begynner verden på nytt, der Lieselotte Pantenburg bidro med fotografiene.