Debido al traspaso del edificio a las Naciones Unidas, fundadas en 1945 para suceder a la Sociedad de Naciones, el complejo se amplía en varias ocasiones.