Tras la muerte de su madre, Jane Leslie Anton, en 1872, fue enviado junto con su hermano menor Conrad de regreso a Honfleur, para vivir con sus abuelos paternos.