Vickrey giftet seg med Cecile Thompson i 1951. Han døde i Harrison i New York i 1996 av hjertesvikt. Han var kveker og medlem av Scarsldale Friends Meeting.