Durante el primer mandato de Reagan, Baker fue Jefe de Gabinete de la Casa Blanca desde 1981 hasta 1985, jefe del Consejo Nacional de Seguridad y consejero de política exterior.