Grey er også kjent for å bidratt til å forby barnearbeid og forby slaveriet i det britiske imperiet. Teen Earl Grey er oppkalt etter ham.