Vaughns foreldre var begge skuespillere. Faren, Gerald Walter Vaughn, opptrådte i radio og hans hustru, Marcella Frances (Gaudel), på teateret. Hans stamtre hadde irske, franske og tyske røtter.