Hans Hildebrand var sønn av Bror Emil Hildebrand og Anna Mathilda Ekecrantz. Han var også bror til Emil Hildebrand. Han ble i 1867 gift med Elin Maria Charlotta Martin.