Fue utilizado como residencia regia por Pedro IV de Aragón y posteriormente, en la planta principal, se llevó a cabo la reforma que convirtió parte de sus estancias en palacio de los Reyes Católicos en 1492.