Er nahm 1794 an den Kämpfen in Polen teil, wurde aber am 4. November 1794 von der Teilnahme am Ersten Koalitionskrieg entbunden. Am 27. November 1794 erhielt Kleist auf eigenen Wunsch den Abschied, angeblich, weil Blücher, welcher erst Oberst war, ihm vorgezogen wurde.