辞去立法院长并遭没产。黄国书所有的圆山别庄移作美军顾问团与在台美国大使馆使用。而别庄外的英式后花园、凉亭等建物通通拆除，成为圆山动物园附设儿童游乐场一部分，曾设置育乐设施及简易骑马场。
再造.1977年，设于圆山别庄隔壁的台北市立美术馆开始筹设，除圆山别庄原有庭园空地成为该馆部分建筑物及及公共空间外，该馆亦价构其圆山别庄。1990年，经小幅度整修后，该别庄成为「美术家联谊中心」。1998年，中心他迁，圆山别庄则由台北市政府指定为市定古蹟。2003年由陈国慈律师个人认养赞助，以每