Einar Bergve var sønn av gårdbruker Knut Tormodsson Bergve (1832–97) og Signe Halvorsdatter Moghus (1843–1931). Han var bror av overlærer Tormod Knutson.