Después de un año y medio allí, el dueño de la tienda encontró que James no era apropiado para ese trabajo, lo llevó a la ciudad portuaria de Whitby y lo presentó a John y Henry Walker.