Thorsen var i begynnelsen av sin karriere også skøyteløper, og ble i 1959 juniornorgesmester som medlem av Hamar Idrettslag. Han kombinerte lenge fotball og hurtigløp på skøyter, men valgte etter 1962-sesongen å prioritere fotball på bekostning av en skøytekarriere.