Kallset arbeidet i i 1987-1988 og var informasjonssjef i Nei til EU i 1993-1997. Deretter begynte han i politisk avdeling i . Kallset er tidligere varaordfører i Tingvoll kommune på Nordmøre, for Arbeiderpartiet.