Fue restaurado y adaptado como vivienda a comienzos del siglo XVII, tras conceder el rey Felipe III el 3 de mayo de 1604 la villa de Anna con el título de Condado a Fernando Pujades de Borja que residió en él con su familia.