I 1850-årene deltok Olafsen i Ole Vigs opplysningsbevegelse ved å holde søndagsskole og ungdomsskole. Han deltok også i avisdebattene om opplysnings- og skolespørsmål.