Vandeleur giftet seg i 1829 med en datter av presten John Glasse. De fikk en sønn og en datter, Ellen, gift med oberst, etterhvert general Richard Greaves, for rundt tyve år assisterende militær sekretær til øverstkommanderende for styrkene i Irland og deretter Colonel of the Regiment for The 40th (2nd Somersetshire) Regiment of Foot.