Forman ble født i Čáslav i Tsjekkoslovakia. Han ble foreldreløs i ung alder da hans foreldre døde i konsentrasjonsleirer under andre verdenskrig. Faren ble arrestert for å ha distribuert bannlyste bøker under nazistenes okkupasjon og døde i konsentrasjonsleiren Mittelbau Dora i 1944. Moren døde i konsentrasjonsleiren Auschwitz i 1943. Forman bodde under krigen hos slektninger. Han fikk senere vite at hans biologiske far var den jødiske arkitekten Otto Kohn.