Tilsammen fikk hun sju barn, hvorav fire døde ganske tidlig. I 1858 mistet hun og Fritz to av barna sine, deres tiårige sønn Fritz og deres treårige datter Irla, i kopper. Ekteskapet med Fritz som hadde problemer med å tilpasse seg livet i USA og få fotfeste der, ble vanskelig. I 1859 reiste han tilbake til Sør-Europa for å kunne støtte uavhengighetskampen i Italia. Han slo seg ned i Zürich som korrespondent, og fikk familien over fra USA til Europa.