Bei Beginn des Französisch-Russischen Krieges 1812 wurde Destrem wie die anderen drei französischen Ingenieure nach Jaroslawl, Poschechonje und schließlich Irkutsk verbannt. Als Destrem nach dem Ende des Krieges im Juli 1815 nach St. Petersburg zurückkehrte, wurde er rückwirkend zum Juni 1812 zum Podpolkownik befördert. Er wurde sogleich nach Georgien geschickt, um die Flüsse Kura und Rioni zu erforschen und Arbeiten an der Georgischen Heerstraße durchzuführen. Nach Destrems Projekt wurde in Reval der Militärhafen angelegt. 1818 wurde er wieder Professor am Institut des Verkehrsingenieurkorps. 1820 wurde er Geschäftsführer des II. Verkehrswegebezirks. 1821 wurde er Mitglied der bei der Kaiserlichen Akademie der Künste eingerichteten Kommission zur Prüfung der Arbeiten des Architekten Antoine-François Mauduit an der Isaakskathedrale.