Faren Mihály var utdannet ingeniør ved ETH i Zürich og gjorde det godt som forretningsmann innenfor jernbane. Han anla omkring 1000 km jernbane i Ungarn og gikk konkurs i 1900. Faren mistet da det meste av sin formue og da faren døde i 1905 ble familiens økonomiske situasjon ytterligere forverret. Moren forble sentrum i en krets av intellektuelle og kunstnere; morens interesse for sosiale og intellektuelle tema betydelig innflytelse på den unge Michael. Hans fire eldre søsken (to brødre og to søstre) utmerket seg på ulike områder. En søster døde i konsentrasjonsleir under holocaust.