Peter J. Elliot ble født og vokste opp i Melbourne, hvor faren hans var en anglikansk prest. Elliott ble tatt inn i den katolske kirke mens han var student ved University of Oxford.