Organisasjonen Ungdommens Vel var et annet sterkt engasjement for Hermo. Han var med på å stifte organisasjonen i 1903. Dette var en sterk organisasjon i Hammerfest, og organisasjonen var i mange år tilknyttet Arbeiderpartiet. Gjennom denne foreningen bidro Hermo og Henrik Manzika sterkt til å politisere Arbeider- og Fiskerforeningen til fordel for venstresiden. Hermo var svært aktiv i organisasjonen både i ung og voksen alder, og han var både nestleder og kasserer i foreningen. Hermo var aktivt medlem av foreningen fram til sin død i 1939.