Estuvo dos años en reclusiones conventuales en diversos lugares de España, hasta que el inquisidor general Felipe Bertrán le concedió permiso para salir a tomar baños, ocasión que Olavide aprovechó para huir de Caldas en Gerona a Francia.