Etter et to års opphold som musikklærer i Stuttgart, ble Silcher i 1817 musikkdirektør ved Eberhard-Karls-Universität Tübingen. Han var gift med Luise Rosine Ensslin (1804–1871) fra Tübingen, som han fikk to døtre og en sønn med. Hvitvinsdruen , en krysning av sortene Kerner og Silvaner, og asteroiden 10055 Silcher er oppkalt etter ham.