Under fengselsoppholdene ble Hauges gode helse brutt ned, og han hadde store plager resten av livet. Da han til sist slapp ut av fengselet, giftet han seg og slo seg ned først på Bakkehaugen gård på Tåsen, deretter på gården Bredtvet i Groruddalen (da Aker). Den fikk han kjøpt ved hjelp av venner. Her ble han besøkt av mange, også geistlige.