志》记载：该文庙“建自唐，寻废”。唐朝初年，邢台已为上州，按照朝廷的规定，必须建立规模相应的文庙。该文庙在唐朝末年荒废，宋朝多次进行维修。元朝初年，忽必烈尊孔子，“诏修天下孔庙”。元朝至元十七年（1280年），顺德府文庙重修。明朝天顺四年（1460年）及成化六年（1470年），顺德府文庙大成殿先后两次由顺德府知府主持扩建。明朝正德元年（1506年），又兴建了文庙棂星门，并且添筑甃泮池石桥。明朝万历十一年（1583年），进士出身的嵩县人王守诚出任顺德府知府，到任后很快倡议“拓地扩修文庙”，加筑了文庙四周围墙。