Después, durante el verano de 1774 envía una carta a Manuel Ventura Figueroa pidiendo la libertad de los detenidos en la revuelta de los quintos y es acusado por el Consejo de Castilla de Pedro Rodríguez Campomanes de "separatista"; este, conjuntamente con el rey, le ofrece la posibilidad de ir al obispado de Málaga, pero el "bisbe Climent" renuncia a este obispado y se retira en Castellón de la Plana, donde acaba sus días.