En rekke ulykker fulgte Tveitt. Det partituret til «Baldurs draumar» som ble brukt i Paris, ble borte i et flyangrep over London under krigen. Huset hans Bjødnabrakane i Norheimsund, 230 meter over havet, ble knust av snøras i 1960. Ti år senere brant bolighuset på Tveitt ned. I denne katastrofen forsvant så godt som samtlige originale nedtegnelser av folketoner. Dertil brant ca. 80 % av hans samlede musikalske produksjon opp. En del av musikken som gikk tapt er senere blitt rekonstruert på grunnlag av arkivmateriale, radioopptak og liknende, deriblant partituret til «Baldurs draumar». Rundt 90 verk er derfor fortsatt tilgjengelige. Tapet gikk sterkt inn på Tveitt, som etterhvert mistet lysten på å komponere i de store formater. Han fortsatte imidlertid sitt arbeide i NRK og laget en rekke kulturprogrammer med egen musikk. I NRK har han også, på karakteristisk vis, sunget inn noen av folketonene han samlet inn.