En él residieron ilustres presos, como fueron los hijos de Pedro I, el marino inglés Conde de Pembroke y don Jaime de Mallorca.