Neumann ble olympisk mester i roing under OL 1932 i Los Angeles. Han var styrmann på den tyske båten som vant firer med styrmann foran en italiensk båt. Mannskapet var roerne; Hans Eller, Horst Hoeck, Walter Meyer, Joachim Spremberg og Neumann som var styrmann.