大甲人何清霖（同治六年丁卯科举人），经向官府请设义塾获准，惟因经费庞大及庙地无着，一时无法齐备而作罢。光绪十一年（1885年）新竹知县方祖荫与恩贡生陈肇芳再度倡建文昌祠，经例贡生谢棠华捐花园地为庙址兴建，光绪十三年3月兴工，至十四年六月全部完成。台湾日治时期初期文昌祠曾有日军驻扎。1898年2月东西厢房设立「苗栗讲习所大甲分教场」（今大甲国小）。明治四十年，（1909年）大甲公学校迁出文昌祠。旋即被改为日本人小学校分教场时，遭大甲民众反对且发生冲突，最后日本小学分教场关闭。大正十三年（1924年）王进财