En el siglo XVIII, el rey Juan V adquirió el palacio con oro proveniente de Brasil, comprándolo al conde de Aveiras, y posteriormente fue remodelado totalmente.