Elvstrøm ble olympiske mester i seiling første gang under Sommer-OL 1948 i London. Han kom på førsteplass i olympiajolle. Han vant ytterligere tre gullmedaljer i de tre påfølgende olympiske lekene. I 1966 ble han tildelt nordiske sportsjournalisters pris, som Nordens beste idrettsutøver det året.