Ernst Günther var sønn av rektor Harry Günther og hans hustru Majken Günther, født Bladh. Han var far til tvillingene Rickard Günther og Savva Ernst Günther.