Hans far var Svend Andersaune. Moren var Johanna Adamsdotter Krog, født på Røros og gift til Audnegrenda i Haltdalen. Det var sagt om henne at hun var jordmor, dyrlege og «sakfører» for hele bygda. Faste Svendsen var nummer 5 av 8 søsken.