Con los años y la pacificación de la zona, el Castillo fue abandonado, por lo que ya no se producían las frecuentes visitas entre los dos núcleos de población.