十二年（1899年），迁至「赤牛头寮」，关帝君之外，增奉吕祖师、张真君、 王天君，尊为四大恩主，开始扶乩济世，人称「乩堂」，又作「祈堂」。明治三十三年（1900年），改称「劝济堂」，刊印善书《如心录》。明治三十五年（1902年）于现址兴建殿宇，至昭和六年(1931年)，因后宫矿业会社在庙的前右下方扩建制冻厂，地层滑动，造成劝济堂龟裂严重而拆除。黄仁祥、简深渊等仕绅发动重建，增加前后殿、两边辨公室、禅房、厨房及花园而成今貌。重建于昭和六年（1931年）虽有对场作，但尚未列为古蹟，该对场作并十分不明