米公祠原称米家庵，始建于元，扩建于明，清康熙年间重建，并改庵为祠。祠坐北朝南，占地16000平方米，中轴对称，四进院落。祠内有拜殿、宝晋斋、仰高堂等纪念性建筑。拜殿建于清康熙三十二年（1693年），面阔三间，进深一间，硬山顶，抬梁式木构架。宝晋殿建于清同治五年（1866年），硬山顶，穿斗式木构架。此外，还藏有“重建米氏故里碑记”等碑刻五十八方及摹刻的米芾手书法帖四十五碣。