Han var sønn av småbruker og sersjant Christian Moe fra Flermoen og Ingeborg Gjermundsdatter Hyllerasen, og overtok småbruket Rustad i Innbygda etter mora, som da var enke, i 1920. Han og kona Jenny hadde seks barn. Han arbeidet også som forretningsfører for Trysil Brannkasse fra etableringen i 1932 til 1943.