Fritz Wunderlichs mor var fiolinist og faren var korleder. I en kort periode eide familien gjestgiveriet . Faren til Fritz mistet jobben på grunn av press fra nazistene, i tillegg til at han led av en alvorlig krigsskade. Han begikk selvmord da Fritz var fem år gammel.