Hergert gikk på University of Florida i Gainesville hvor han spilte for Florida Gators under hovedtrener Bob Woodruff fra 1956 til 1958. Han spilte flere posisjoner i løpet av tre år på laget, inkludert center, fullback, linebacker og placekicker.