Von Dohnanyi vokste opp i Berlin-Grunewald. Hans far Hans von Dohnanyi ble i 1938 sendt som til Leipzig. Han ble henrettet mot slutten av andre verdenskrig som motstandskjemper.