Men det tok ikke lang tid før klimaet ble forverret. de Tournon begynte å etablere et slags nuntiatur ved keiserhoffet, og det uten medvirkning fra noen av de lærde jesuittene som var tilknyttet hoffet som keiserlige rådgivere og vitenskapsmenn og som nøt keiserens høye respekt og store velvilje. Keiseren måtte også erkjenne at de Tournon ikke var beredt til å tillate de kristne å ta del i den kinesiske forfedrekult og konfuciuskult, selv om disse ritene gjaldt som helt fundamentale for det konfucianske statsskikk og selv om neglisjering av ritene nærmest var likeverdig med en opprørshandling. Ved den annen audiens keiseren gav de Tournon (29. juni 1706) og likeså ved den tredje, avskjedsaudiensen, (30. juni samme år) advarte keiseren ham, men uten at det hadde noen virkning.