Celles-ci étant reprises, il s’empare le 25 août de Perne et de Hodendorf, défait le 28, le duc de Wurtemberg, à qui il fait , passe une gorge des monts Métallifères entre la Saxe et la Bohême et marche sur Kulm (au nord d'Ústí nad Labem), où et Autrichiens commandés par le général Ostermann puis par le général Barclay de Tolly, le contraignent à rétrograder après un combat opiniâtre. Le 30 août, le général Kleist et ses Prussiens attaquent la position de Vandamme sur ses arrières et déterminent le sort de la bataille. C'est la défaite de Kulm. Il est capturé par des cosaques alors qu'il tente de sauver son armée et est fait prisonnier, emmené à Moscou, puis transféré à Viazma.