Han var født på Madagaskar der faren Johannes Skauge (1899–1984) fra 1927 til 1933 var sekretær i Det Norske Misjonsselskap, og senere dets leder 1961–1968. Tor Skauge ledet Oslo Ungdomskor (stiftet 1946) fra 1953, etterfulgt av Joar Rørmark (født 1935) i 1973. Koret hadde flere radiosendinger på NRK, fra 1957 i , et lørdagsshow fra Store Studio ledet av Erik Diesen. Da landet fikk fjernsyn var Skauge med og dirigerte i søndagsshowet ledet av Erik Diesen fra 1960 til 1962.