De acuerdo con la anterior resolución, el edificio fue construido según las trazas de Lemaur, siendo dirigidas las obras por el fray Manuel de los Mártires, y como ejecutores reales por los maestros Juan López Freire y Alberto Ricoy, y, según la inscripción que figura en el friso del mismo palacio, las obras se extendieron entre 1766 y 1772.