文史学者说法，此祠最早并不是寺庙，而是教育地方学子之处，所以建筑不以三川殿表现。钟麟江在该祠创设祀典会，来资助教师和学子。道光年间，凤山县的进士与举人多出自六堆地区，此祠的教育作化功不可没。六堆还成立了科举会，供应参加乡试和上京会试者旅费。根据《凤山县采访册》，嘉庆十五年（1810年）到光绪甲午年（1894年），凤山县客家人进士就有黄骧云、张维垣、江昶荣三人，举人有廿人，贡生有十九人，这批有不少皆曾在昌黎祠讲学、就学，如内埔竹围村江昶荣进士、长治举人邱鹏云、内埔岁进士邱国桢、举人曾中立、曾伟中、李向荣等