Han var bror av redaktøren og bokhandleren Olav Hougen, og gjennom søsteren Anne var han svoger med forfatteren Halvor Floden. Sønnen (1912-96) har skrevet to barnebøker og noen hørespill for NRK Lørdagsbarnetimen, og oldebarnet har redigert flere spørrebøker.