良吉哉所编撰的《台南州祠庙名鑑》，神像是由当地人蔡勅的祖父从赤山巖观音庙分香而来，先供奉于自宅，直到同治十年，蔡勅、蔡派、蔡仁等庄民协议建庙。据传同治三年（1864年），古名三块厝庄的三家村与东邻的村庄经常为扩张村落土地而发生械斗，鳌鼓庄人就送一支火砲给三块厝庄作支援。另一说纠纷起因是当今云林县四湖乡蔡厝庄民，因庄民被海埔庄人掳走，遂求鳌鼓庄蔡姓宗亲协助，鳌鼓庄又转向请託三块厝庄蔡姓宗亲，终于强力将被掳之人救出，因而