La exclaustración de este convento en 1836 por las desamortizaciones supuso que la hermandad tuviera un momento de decaimiento.