Olaf Klingenberg giftet seg i 1913 med Hjørdis Bergland, datter av sogneprest Aslak Bergland i Borre. De hadde en sterk interesse for friluftslivet. De var barnløse, og da Hjørdis også døde i 1977, var det vesentligste av deres formue testamentert til Trondhjems Turistforening. Olaf og Hjørdis ble gravlagt i Klingenbergs familiegrav på Domkirkegården.