Robert Borks foreldre var Harry Philip Bork jr. (1897–1974) som var innkjøpsmedarbeider for et stålselskap, og Elisabeth (født Kunkle; 1898–2004) som var lærer. Faren var tysk-irsk av bakgrunn, moren Pennsylvania Dutch (tysk).