康熙二十一年来此，叹曰：「此胜地也，宜为兰若。」于是斩荆棘辟草莱，结茅其间，再由南海普陀山迎请观音圣像而供奉之。因僧从远望此境，高接云天，遂名为半天岩；又以山间之云常现紫色，取寺为紫云寺。自创建以来，可查的兴修纪录共八次。干隆三十年（1765年）的阿里山通事陈密武告示的〈严禁谋夺佛祖香灯碑记〉可知此为紫云寺扩展的第一阶段。〈半天岩重建碑记〉记载在道光十九年（1839年）嘉义发生地震，导致寺倾倒十余年，直至牛斗山首事郭濯海接手重建，历时四年方在咸丰五年（1855年）完成。1904年的斗六地震、1906年的