Han var sønn av lensmann Thomas Tostensen Jørstad 1787-1880 og Sønnøv Olsdatter Undset (Biri) 1791-1866. På morssiden var han søskenbarn med konen til lensmann og eidsvollsmann Anders Lysgaard på Biri, og ble opptatt som deres pleiesønn og innsatt som arving til gården Svennes, som han overtok i 1840. Anders d.y. var døpt 'Anders Lysgaard' og brukte Lysgaard som familienavn. Anders d.y. var gift med Dorthea Marie Engø født 1816 i Borre.