Hallvard Sand Bakken var sønn av kjøpmann Emanuel Christian Sand Bakken (1877-1963) og Olga Halvorsen (1877-1956). Han ble i 1934 gift med Ruth Michelsen (f. 16. august 1909), som var datter av Bergenskjøpmannen Jon Michelsen (1871-1942) og hustru, Erna Pommerenk (1878-1959).