Con el tiempo, el edificio se quedó pequeño respecto a sus funciones originales y cada órgano fue abandonándolo, siendo el último en retirarse la Asamblea Legislativa en la década de 1970.