为台湾总督府宪兵队的监狱使用。
战后.二战后的1950年代，该建物连同数千坪庭园，由中华民国政府拨配给立法院副院长黄国书居住使用。1970年4月，黄国书因受国光人寿弊案牵连，辞去立法院长并遭没产。黄国书所有的圆山别庄移作美军顾问团与在台美国大使馆使用。而别庄外的英式后花园、凉亭等建物通通拆除，成为圆山动物园附设儿童游乐场一部分，曾设置育乐设施及简易骑马场。
再造.1977年，设于圆山别庄隔壁的台北市立美术馆开始筹设，除圆山别庄原有庭园空地成为该馆部分建