I 1791 emigrerte han. Han kom til Koblenz og sluttet seg der til den kontrarevolusjonære hær organisert under prinsen av Condé (1736–1818). Etter at bestrebelsene for å berge kong Ludvig XVI var slått feil, dro den overbeviste rojalisten Cazalès i 1793 til Storbritannia, der han kunne holde seg i godt hold med sin mangeårige maitresse Michelle de Bonneuil, på grunn av finansiell hjelp fra Edmund Burkes (1729–1797) og William Pitt. Som motytelse foretok han på oppdrag av den britiske regjering og de franske rejalister flere offisielle og hemmelige oppdrag i Sveits, Italia og Spania.