El edificio también sirvió esporádicamente para dar cobijo a los reyes de Aragón, como es el caso de Jaime I y su esposa doña Leonor, que estuvieron presos aquí en 1224 tras un levantamiento de los nobles aragoneses.