Brita Bjørgum var datter av gårdbruker og selveier Josef Tollefson og Brita Larsdotter og søster av maleren Nils Bjørgum. Hun forble ugift.