Gough Whitlam

Pada 1942 Whitlam menikah dengan Margaret Dovey, anak Hakim Bill Dovey, dan memperoleh tiga orang anak laki-laki dan seorang anak perempuan. Margaret Whitlam dikenal karena cerdas dan pandai mengejek seperti suaminya. Ia juga seorang pengarang yang banyak menghasilkan terbitan dan bekas juara renang. Salah seorang anak mereka, Nicholas Whitlam, menjadi bankir yang terkemukadan tokoh yang juga kontroversial. Anak mereka yang lainnya, Tony Whitlam, pernah sebentar menjadi anggota parlemen federal dan diangkat sebagai hakim pada 1993 di Pengadilan Federal Australia, dan belakangan pada 1994 hakim di Mahkamah Agung ACT. Anak mereka yang ketiga, Stephen Whitlam (lahir 1950), adalah seorang bekas diplomat. Anak perempuannya, Catherine Dovey (lahir 1954) pernah menjabat di Badan Pengurangan Hukuman New South Wales.