Som menighetsforstander utviklet Holm også et nært vennskap med Gabriel Kirsebom Kielland. Han hadde fått kjennskap til Brødremenigheten i studietiden og ble i 1828 opptatt som medlem i menigheten.