Stevens a preluat custodia celor doi nepoți mai tineri, Thaddeus (adesea numit „Thaddeus Jr.”) și Alanson Joshua Stevens, după ce părinții acestora au murit în Vermont. Alanson a fost trimis să lucreze la afacerea lui Stevens, Caledonia Forge, Thaddeus Jr. a fost exmatriculat de la Dartmouth, deși ulterior a absolvit și a fost luată de unchiul său la cabinetul de avocatură. Alanson a ajuns în timpul Războiului Civil la rang de căpitan și a comandatt a și a murit în luptă la Chickamauga. După moartea lui Alanson, unchiul său și-a folosit influența pentru a-l face pe Thaddeus Jr. de Lancaster.