Este palacio fue mandado construir por el marqués de la Gandara Real en el año 1600, y sirvió como cuartel a las tropas de Napoleón tras la batalla de Espinosa, que lo quemaron a su partida.