Im März 1988 erhielt er zusätzlich die Aufgabenbereiche Fitness und Amateursport zugewiesen, musste aber im Januar 1990 zurücktreten, weil er bei den Commonwealth Games in Auckland einen Schiedsrichter beleidigt hatte. Trotz dieses Fehlverhaltens ernannte ihn Mulroney zum Vorsitzenden eines Spezialkomitees, das eine begleitende Resolution zum Meech Lake Accord, einer geplanten umfangreichen Verfassungsänderung, ausarbeiten sollte. Im April 1991 kehrte Charest ins Kabinett zurück und wurde Umweltminister.