Su posición privilegiada la convertía en un bastión inexpugnable, se dice que las obras se prolongaron tanto y con tan alto coste que Carlos III, rey de España, se asomó a la ventana de su palacio con un catalejo para que le indicaran donde se encontraba aquella construcción.