Cuando la población en el siglo XV y XVI empezó a construir fuera del recinto amurallado, al pie de la muela sobre la que está edificada la fortaleza, utilizaron las piedras de la muralla sur para edificar las nuevas casas.