Terje Risberg er sønn av Bele Erling Risberg og Nina Hauge Risberg. Han vokste opp på Nesodden utenfor Oslo.