Henrik Backer var sønn av fiskeriskolebestyrer Johan Fredrik Backer (1839-1906) og Josefine Mathilde Thrane (1841-1886). Han ble år 1900 gift med Dagny Berntzen.