Durante el siglo XII comenzó a deteriorarse y se convirtió en un lugar desagradable, como guarida de ladrones y personas de mal vivir.