Berrefjord tok juridisk embetseksamen i 1941 og virket som dommer under landssvikoppgjøret. Senere arbeidet han som politifullmektig og fra 1960 til 1967 som statsadvokat i Vestfold, Telemark og Aust-Agder. Han var lagdommer i Agder 1967–1976 og fylkesmann i Telemark 1976–1988.