Austlid var sønn av folkehøyskolestyrer Andreas Austlid fra Gausdal, og Gunhild Offigsbø fra Lom. Han giftet seg i 1925 med Dagny Landheim (f. 1904) fra Løten. Sammen hadde de fem barn.