Después de la muerte de sus padres en 1895 y 1904 respectivamente, Vanessa se mudó al barrio londinense de Bloomsbury con su hermana Virginia y sus hermanos Thoby (1880 - 1906) y Adrian (1883 - 1948).