Créé Général des galères en , il commande l'escadre de 15 bâtiments à rames envoyée à Candie sous les ordres du duc de Beaufort pour porter secours aux Vénitiens assiégés par les Turcs. Après la mort de Beaufort (), Vivonne monte le vaisseau amiral et tente de poursuivre la lutte. Blessé lors du combat du , il constate l'impossibilité de forcer les lignes turques et ramène la flotte à Toulon le . En 1671, Vivonne est chargé de croiser le long des côtes de Provence à la poursuite des pirates barbaresques. Au début de la guerre de Hollande, en 1672, il se trouve au fameux passage du Rhin. Son cheval, appelé Jean Le Blanc, fait au milieu du fleuve un faux pas qui faillit renverser son maître dans les flots. « Tout beau, Jean Le Blanc, dit tranquillement Vivonne, voudrais-tu faire mourir en eau douce un général des galères ? ». Au même moment, il reçoit à l'épaule gauche un coup de feu dont il ne guérit jamais, et qui le força de porter toujours son bras en écharpe, mais il supportait gaiement cette disgrâce. En 1673, il se signale au siège de Maastricht, puis est nommé gouverneur de Champagne en 1674.