Langaard stammet fra en gammel sjømannsfamilie. Han var bror av forretningsmannen Conrad Langaard (1823–97) og far til forretningsmannen og kunstvennen Christian Langaard (1849–1922).