阳公司矿所所长翁山英之母笃信佛教，于是劝说台阳业主颜国年为之建庙，颜国年欣然捐献土地建庙，增设大雄宝殿，奉祀释迦牟尼佛，又由桃园大溪分灵观音菩萨前来奉祀。邀基隆灵泉寺普义法师前来住持，而后香火鼎盛，成为台阳公司员工祈求平安之宗教圣地。1938年，改为日本佛教的「日新佈教所」，直到1945年。1945年，日本二战投降，改回原名金山寺至今。1956年夏，副总统陈诚赠匾，题字「清净庄严」。1973年秋，因寺宇、伽蓝等年久多有破漏，颜钦贤正式捐献建物敷地重修。