Esta actitud lo enemistó con la emperatriz María Teresa de Austria, quien no soportaba tales comportamientos en un miembro del clero; esta hostilidad no sólo logró desbaratar su misión, sino que además influyó negativamente la percepción que de él tenía la hija de la emperatriz, María Antonieta, quien posteriormente sería reina de Francia.