En 1882 se comenzó su restauración, mientras se usaba como palacio entre 1875 y 1882 el edificio situado a una cuadra en la esquina de las calles "Potosí" y "Ayacucho", de ahí el denominativo de «Palacio Chico» para el inmueble que hoy es sede del «Viceministerio de Culturas» .