James "Jim" Wilson creció en Harlem y quería viajar a lugares donde a menudo estaba en desacuerdo con su padre, Gideon Wilson, que trabajaba como ministro católico.