Debido a esta situación, el castillo sufrió a lo largo de su historia numerosas invasiones por parte de sus vecinos castellanos.