La zona del templo sirvió de almacén de mármol a lo largo de todo el siglo XVI, como atestigua la mención de una «cantera de mármol» en un documento de 1579.