杜聿明故居位于美术馆东街路西，南依五四大街。该院原来是一组带花园的住宅，1958年兴建中国美术馆时，将该院西部的花园部分拆除，仅留下东半部的住宅部分。该宅院大约建于清朝后期，原是慈禧太后侄女的私宅。中华民国初年，出售给一德国商人，抗日战争后被买办吴信才购得。不久被作为敌产没收。后来成为国军将领杜聿明的住宅。现为单位宿舍。该院的建筑格局较为高级，是北京城内中型四合院的典型。院内的建筑保存较好，砖、木、石雕富有特色。2001年3月8日，被公布为北京市文物保护单位。 
建筑.该