Hilde Grythe er datter av programsekretær Odd Grythe (1918–1995) og skuespiller/regissør Kirsten Sørlie (1926–2013). Hun er gift med fiolinisten Terje Tønnesen i hans andre ekteskap.