Skjærvø jobbet senere for fagbevegelsen, og var spesielt engasjert i arbeidet mot sosial dumping i arbeidslivet. Som ombud i Oslo Bygningsarbeiderforening og Fellesforbundet skrev han også håndbok for tillitsvalgte om temaet.