穆斯林王国在11世纪建造。公元1118年，阿方索一世在收复失地运动中夺回了萨拉戈萨，阿尔哈费里亚宫之后成为了阿拉贡王室用地。在佩德罗四世时期，这里成了皇家住所，许多伊斯兰风格的建筑被改建成天主教风格建筑。文艺复兴时期，人们修建了城墙和军事防御结构。它在半岛战争期间遭到了拿破仑军队的破坏。