En el censo de 1860, James se identificó como panadero y en el censo 1870 como "vendedor ambulante", trabajo en el que el joven William le asistiría.