I 1843 måtte han si opp embetet i Cleversulzbach, på grunn av helsetilstanden. Deretter flyttet han først til Hall og siden til Mergentheim. I 1854 ble han ansatt som lærer i tysk litteratur i Stuttgart, og giftet seg i november samme år med Margarete von Speeth. Allerede i 1866 måtte han likevel oppgi sin stilling som språklærer, og bodde i årene som fulgte i småbyer rundt Stuttgart. I disse årene knyttet han et varmt vennskap med Moritz von Schwind, og mottok besøk av Ivan Turgenjev.