Westye Egeberg var gift med Anna Sophie Muus (1775–1862) og var far til sorenskriver i Aker Johan Henrik Egeberg (1804–1894), som eide Grefsheim på Nes, nå i Ringsaker, Westye Martinus Egeberg (1805–1898), kirurg Christian August Egeberg (1809–1874), rittmester Peder Cappelen Egeberg (1810–1874) og komponisten Fredrikke Sophie Egeberg (1815–61). Christian August Egeberg var far til livmedikus Theodor Christian Egeberg (1847–1915).