Robert Tracy var sønn av Robert Emmet og Margaret Agnes (født Cahill) Tracy. Han studerte ved Saint Joseph Seminary College og Notre Dame Seminary.