Wallenberg giftet seg 19. august 1890 med Gertrud Amalia Hagdahl. Hun ble født 29. mai 1864 og var datter til legen og kokebokforfatteren Charles Emil Hagdahl og Emilia Gylling. Amalia Wallenberg døde 1959.