Debido a distintos rumores que se levantaron contra él y la reina, Larramendi acudió a Sevilla, donde su buen nombre fue restituido por Felipe V, para luego retirarse al Santuario de Loyola (Azpeitia).