Häufig weilte Clemens Wenzeslaus auch im Schloss zu Kärlich (bei Koblenz), einem Jagdschloss der Trierer Kurfürsten, obwohl er selbst kein Freund der damals überaus grausamen Jagd gewesen sein soll. In der Kapelle dieses Schlosses weihte er am 10. August 1784 den französischen Theologiestudenten Franz Josef Pey zum Priester, der am 3. September 1792 zusammen mit 190 weiteren Priestern während der Septembermassaker in Paris als Märtyrer starb.