荣棣来台后，在台成为光绪年间秀才，并为台湾文吟诗社社长，为当时台湾早期本土着名的乡土诗人，被现代历史学者誉为「文采德行、素孚桑梓」、「发皇汉学、厥功至伟」。而吴荣棣秀才育有八子三女，其中八兄弟有四位是医生，三子吴鸿麟，即为吴伯雄的父亲。吴鸿麟为日本九州大学医学博士、台北帝国大学外科医局长，后来伙同其大哥吴鸿森开创了中坜医院，而吴伯雄亦出生于此医院。现今中坜医院原址具八十年历史，为日治时代巴洛克式建筑，应地方之要求，保存遗蹟，放弃改建大楼的计画，保存原貌，楼上提供佛光山的禅净中心，楼下则为立委吴志扬的服务