说当时所使用的建材十分讲究，使用来自广东的广东石、福建的福州杉、四川山岩等等，并雇工造窑烧砖。但因为工程缓慢，吴家逐渐没落，之后庭园由归仁后市仔吴鼻接手。而另一说则是据卢嘉兴考据，是府城竹仔街富绅吴世绳在道光年间所建。一说他因为见到枋桥头吴尚新所建的吴园，不甘落后而在归仁兴建公馆。又说他是为了收租方便，才在归仁看西建租馆。但吴世绳在道光十一年（1831年）逝世后，「吴园」才完成了一半，后来其子在隔年将「吴园」全部完工，为吴家13馆半中的1馆，该处因而又有「吴二老爹公馆」之称。
发