Han vokste opp i Andebu og tok sin utdannelse i bygningsingeniørfag ved Norges tekniske høgskole. Han jobbet med broer i Statens vegvesen og deltok også i felttoget i Norge i 1940. Fra 1941 til 1945 var han medlem av motstandsorganisasjonen XU, hvor han smuglet brodesign for å bli mikrofilmet og kopiert. Medhjelpere i dette arbeidet inkluderte broingeniørkollega Arne Selberg. Samtidig var Holt en forbindelse til Reichskommissariat Norwegen og Organisation Todt, de styrkene som XU kjempet mot, "på grunn av hans beherskelse av det tyske språket".