Retornó brevemente como Ministro de Asuntos Exteriores por pocos días en enero de 1851, y luego retornó ya para quedarse en el verano de 1852, convirtiéndose en el primer Ministro de Asuntos Exteriores del Segundo Imperio Francés.