Hirschfelder ble olympisk mester i roing under Sommer-OL 1964 i Tokyo. Han var med på den tyske fireren som vant konkurransen i firer med styrman foran Italia og Nederland. Mannskapet på den tyske båten var roerne; Peter Neusel, Bernhard Britting, Joachim Werner, Egbert Hirschfelder og Jürgen Oelke som var styrmann.