Po powrocie wigów do władzy w 1846 r. Grey otrzymał stanowisko ministra spraw wewnętrznych. Na tym stanowisku musiał zmierzyć się ze skutkami klęski głodu w Irlandii oraz próbą powstania na wyspie. W 1848 r. musiał zmierzyć się z rozruchami w Londynie wywołanymi przez czartystów. W 1847 r. Grey zmienił okręg wyborczy na North Northumberland. W 1852 r. przegrał wybory parlamentarne. Do Izby Gmin powrócił w styczniu 1853 r. jako reprezentant okręg Morpeth.