A finales del siglo XIX presentaba un aspecto casi lamentable y el mismo historiador escribía: ""La parte principal y más antigua de este palacio está arruinada, quedando únicamente la puerta principal y dos ventanas hasta la cornisa en que debió apoyarse el tejado, y lo que hay en pie parece ser reedificado en época posterior, pero sin solución de continuidad, esto es, sin desmontar los muros primitivos, en los cuales no se hizo más reforma en todo caso que abrir o ensanchar algunos vanos.