El convento fue fundado en 1602 por la Tercera Orden de San Francisco en la capilla de San Cosme y San Damián, situada en la calle Cabezas (actual calle Sol), en la collación de Santa Catalina, y en la aneja casa de los Marqueses de Villafranca del Pítamo y Carrión de los Céspedes.