Olsen vant sammen med Carl Ringvold, Thorleif Holbye, Tellef Wagle og Alf Jacobsen olympisk gull i seiling i klassen med den norske båten «Irene» i 1920. Det var kun en båt i denne klassen.