Andrews har siden 1971 vært gift med skuespilleren Georgina Simpson, og de har tre barn sammen. Han er uttalt dyslektiker og engasjert i arbeidet mot anoreksi ettersom en av hans tre døtre er rammet av denne sykdommen.