Su padre, Mark Baker, se había vuelto a casar en 1850; y al parecer le dejó claro a Eddy que su hijo no sería bienvenido en el nuevo hogar conyugal.