I suoi genitori sono ebrei, suo padre bulgaro e sua madre austriaca. Si conobbero alla facoltà di medicina dell'università di Vienna, si sposarono e si trasferirono a Sofia. Sua madre torna a Vienna per due mesi per far nascere il suo unico figlio. Il giovane Carl vive insieme ai suoi genitori in Bulgaria nei primi anni della sua vita. Quando compie 5 anni parte con sua madre per Vienna. Lì studia nella scuola reale di Freud fino all'età di 14 anni. I suoi genitori divorziano e lui, durante l'estate, vive con suo padre in Bulgaria. Dopo i cambiamenti politici in Austria nel 1938, i suoi genitori si risposano per salvare il padre dal regime nazista. Carl vive un anno con suo padre e frequenta il collegio americano a Sofia. Intanto sua madre parte per l'Inghilterra per riuscire a recuperare un visto per gli Stati Uniti dove vi arrivano nel 1939, con soltanto 20 dollari in tasca.