Olsen tok sølv i EM på skøyter, allround i 1922, og vant NM på skøyter, allround i 1921 og 1923. Han tok bronse i NM i 1920, og kom på 4.-plass i VM i 1922, 5.-plass i EM i 1923 og 5.-plass i VM i 1923. Kort tid etter skøytesesongen 1923 fikk han konstatert sykdommen tuberkulose. Utover året ble han sykere og sykere og måtte til slutt gi tapt for sykdommen 3. januar 1924, bare 26 år gammel. Han ble gravlagt på Nordre gravlund i Oslo og et gravmonument ble reist senere samme år med midler fra kolleger i idrettsmiljøet.