I 1847 oppfordret Olafsen gjennom en artikkel i Norges lærere til å organisere seg i lærerforeninger. Han fikk støtte av prestene i distriktet og kunne året etter delta i stiftelsen av den første skolelærerforeningen i Romsdal på et møte i Molde. I 1850 deltok han som viseordfører på det første stiftslærermøtet i Trondheim.