Tras su salida del Ministerio de Hacienda, fue designado Gobernador del Banco de España, en el año de 1965, cargo que ejerció durante cinco años, hasta que fue acusado en el caso Matesa, provocando su renuncia y retiro de la vida pública.