Karset var sønnen til en gårdbruker. I unge år gikk han både amtsskolen og Sagatun Folkehøyskole. I 1884 ble han regnskapsfører og disponent for Vangs brenneri, en stilling han hadde til 1909. Fra 1900 var han gårdbruker på storgården Nordre Hoel i Vang. Han kjøpte også opp flere andre gårder i Vang.