Desde los años 1920 es sede del Ministerio de Relaciones Exteriores del Perú y es conocido como el "Palacio de Torre Tagle".