Fra seksårsalderen fikk Larssen pianoundervisning hos Anlaug Stein, før han i ti år var elev av Erling Westher. Senere utdannet han seg til cand. real. innenfor statistikk, og var ansatt ved Statistisk sentralbyrå og Transportøkonomisk institutt.