Imhoff ble olympisk mester i basketball under OL i 1960 i Roma. Han var med på det amerikanske laget som vant basketturneringen foran Sovjetunionen og Brasil. Det var femte gangen basketball sto på det olympiske programmet. 16 lag deltok i turneringen. USA vant alle åtte kampene og ble olympiske mestere for femte gang.