Han var gift med ballettdanser Grete Brunvoll, og derigjennom far til danseren og skuespilleren Bente Brunvoll (født 1954) og pianostemmeren Kim Brunvoll (født 1951).