队、新竹市团管部进驻，变成军事机关。后来又变成大陆地区人民新竹处理中心，即现在的新竹靖庐的一部分，二楼亭阁全毁，一楼拱门甚至成为浴室。1977年为止，潜园原址尚存有观音亭、大门、古井、香石山房、部分碧栖堂以及少数住宅建筑。1990年代，台湾史蹟专家李干朗教授和陈荣村教授，曾经各别出版过潜园修建调查计画，但是新竹市政府并未将此地指定为古蹟。2012年6月27日，仅存的潜园大门门楼遭到地主无预警拆除，将改建成收费停车场。新竹市文化局发布声明，指称因文化局未将潜园列为文化法定资产，所以市政府无法保护，只能