Görings mor, Franziska «Fanny» Tiefenbrunn (1859-15. juli 1923) kom fra en bayersk bondefamilie, og dette ekteskapet (inngått i 1885) mellom en aristokrat og en kvinne fra de lavere samfunnsklasser var bare mulig siden Heinrich Ernst Göring var enkemann. Hermann Göring var en av fem barn, den eldste søsteren Paula Elisabeth Rosa Göring var fra farens første ekteskap, ellers hadde han brødrene Albert Göring og Karl Ernst Göring, og søsteren Olga Therese Sophia. Selv om antisemittisme var ganske utbredt på denne tiden, skal ikke Görings foreldre ha hatt slike synspunkter.