A causa de las dificultades que ocasionaba mantener a tantos hijos, Robert fue enviado a Mánchester siendo aún muy pequeño, donde fue cuidado por unos parientes sin descendencia.