中兴建台湾省城时，当时的台湾富商吴鸾旂亦任董工总理负责监造省城，同年吴鸾旂建公馆于省城内的新庄子地区，佔地千余坪（后人称为吴鸾旂公馆）。1922年吴鸾旂（大正11年）去世后，其长子吴东碧始从中国大陆返台，并依遗嘱在今太平冬瓜山兴建吴家花园与墓园（今存吴鸾旂墓园）。1935年吴东碧将吴氏公馆卖给有生意往来的基隆颜家颜钦贤，颜再捐给日治时期的市府作农校用地，1943年曾做为台湾总督府台中高等农林学校（今国立中兴大学）的临时宿舍，后改作孔庙用地，但孔庙始终未动工。中华民国接管台湾后，公馆就被百余违建户佔住，后经台