Jones ble født i Ince i England men flyttet med foreldrene til USA da han var fem år gammel. Familien slo seg ned i East Rochester i New York, der unge Robert fikk jobb i en lokal golfklubb. Han ble en ivrig golfspiller som ung, men helseproblemer gjorde at han ikke deltok i turneringer.