永乐三年（1405年）重建时迁至今址。现存建筑为清同治八年（1869年）重建，光绪五年（1879年）建成。中华人民共和国成立后，文庙遭受极大破坏，西侧的府学部分拆建医院，东侧的文庙也被占用。1985年，当地政府开始拨款重修大成殿、戟门及两庑，并重建棂星门。1991年，文庙被福建省人民政府公布为第三批省级文物保护单位。
建筑.文庙中轴线上依次为屏墙、棂星门、泮池、戟门、大成殿，殿前有两庑，组成封闭式院落。大成殿面阔五间，进深四间，重檐歇山顶。庙内尚存明嘉靖年间浙江黄岩人符检摹