Han var født i Åfjord, men familien flyttet til Husbysjøen i 1923, hvor faren kjøpte gården Fosshaugen. Georg Breivoll ble arrestert under Operasjon Oleander i mai 1944, og satt fengslet som krigsfange på Vollan, Falstad og Grini fram til fredsslutningen i mai 1945.