Sitt første ekteskap inngikk han i 1869 med Tarjer Nilsdatter (f. 1830) fra Landstveit på Herefoss. Hun hadde to barn fra før. Tarjers grufulle tilværelse før ekteskapet, har nok vært med på å prege Anders syn på samfunnets skjevheter, og han brukte all sin makt for å bedre folks levevilkår. Anders og Tarjer fikk ei jente i 1870, men allerede i 1873 døde Tarjer.