Fue este el episodio culminante en su carrera política, que además vio recompensado con el título de Grande de España; pero fue el último, ya que, a su retorno a Francia en 1722, no consiguió ascender a primer ministro y, al año siguiente, fallecido su protector y amigo, perdió todo acceso al poder y, sin nada que hacer ni expectativa alguna, se retiró de la corte a su Castillo de La Ferté-Vidame, donde recibió con frecuencia visitas de su amigo Montesquieu, quien agradecía su amena conversación y amable trato.