7年和1722年期间位居高位，因密谋反对路易十五的摄政奥尔良公爵腓力二世，被贬为里昂总督，几乎在流亡。他家族的两个年轻成员雷斯公爵和阿兰库尔侯爵也因在凡尔赛的花园发生同性恋关系而都被流放。 维勒鲁瓦在年老时才被路易十五召回。 在1730年维勒鲁瓦死于巴黎。维勒鲁瓦公爵是一个英勇而豪爽的战士，但作为指挥官，他的才干无法和同时代的维拉尔大元帅和布夫莱公爵等人相比。他生活阔绰、讲究排场，极其轻浮地逗乐妇女，也极其傲慢。