Hijo del reputado barítono Dietrich Fischer-Dieskau y de la chelista Irmgard Poppen, se crio en un ambiente musical y ya a los diez años mostró sus deseos de dedicarse a la dirección de orquesta tras asistir a una representación de "Don Giovanni" que protagonizaba su padre en la Deutsche Oper de Berlín.