Philippe Gaumont commence le cyclisme à treize ans, après avoir pratiqué le football en sport-études. Il intègre le club de Moreuil, dirigé par Michel Desavoy. Il obtient de nombreuses victoires en catégorie cadet. Entraîné sur piste par Francis Van Londersele, alors conseiller technique régional de Picardie, il est champion de France de poursuite en cadet deuxième année. L'année suivante, à 17 ans, il est sélectionné en équipe de France junior par Bernard Bourreau. En 1992, Michel Thèze, entraîneur de l'équipe national du contre-la-montre par équipes, l'intègre à sa présélection. Gaumont participe aux stages de l'équipe et parvient à être sélectionné pour les Jeux olympiques de Barcelone. Avec Hervé Boussard, Didier Faivre-Pierret et Jean-Louis Harel, il y obtient la médaille de bronze du contre-la-montre par équipes. Ces Jeux olympiques sont le de sa carrière :