历史悠久，有麻豆地区古蹟庙宇第一之美称。1734年（清雍正十二年），该角国学生吴仕光感于庙貌寒酸，故提倡辟建庙宇，乡民们应和，在众人努力下大功告成。当时庙前一带曾一度为麻豆地区最繁华的地段，与水堀头近在咫尺，每日车水马龙，盛极一时。1768年（清干隆三十二年），发生大地震，文衡殿几乎倒塌，因当时社会经济困顿，修复进展缓慢。1774年（清干隆三十九年），在地乡宾和仕绅黄清芳、吴时举、吴时兴、陈志光、柯睿哲等提倡重修，当地原住民亦有参与，修复历时5个月，庙貌乃告一新，1778年（干隆四十三年）立「重