Herman Wedel-Jarlsberg var sønn av hoffjegermester Herman Wedel-Jarlsberg (1818–1888). Han var offiser 1875–1887, deretter eier av Bogstad gård i Vestre Aker og direktør i treforedlingsbedriften Union Co.