1906年），兵部被裁撤改为陆军部。新成立的陆军部需要新的办公地点，遂将贝子斐苏府和和亲王府的建筑除山门外全部拆除，建为西洋楼群，设计师为英国留学归来的沈琪，建造方为中国营造厂。贝子斐苏府原址建为主楼，和亲王府原址修为的陆军贵胄法政学堂。次年，主楼建成；宣统元年（1909年）陆军贵胄法政学堂建成。1909年宣统二年（1910年）清海军部成立后，贵胄学堂被撤销，其建筑被海军部征用，两个军部共用一个大门。1912年袁世凯就任中华民国临时大总统后以此地为办公地，其中西院为总统府，东院为国务院。1913年，总统府和