I mange år var han overformynder, med i Voss forliksråd, med i Voss sokneselskap, var formann i byggenemden for Hodnaberg Kraftanlegg samt formann i Voss Jordbruksskule. Hjelle var en populær mann i idrettskretser og ble i 1954 det første æresmedlemmet i Voss Idrottslag.