Durante la Baja Edad Media, es posible que acabara el expolio, si bien los edificios quedaron abandonados a las afueras de la ciudad medieval, lo que facilitó que los años los sepultaran y que los Toledanos olvidaran la ubicación de los mismos.