庆云3年（706年），在嘉祥2年（849年），由慈觉大师圆仁放置释迦如来、阿弥陀如来及大日如来三座佛像进入寺庙里面，所以「三佛寺」故名。山号由而得名。该寺位于鸟取县海拔900米高的三德山中部，是一栋山神庙。与中国山西省恆山上面的悬空寺差不多，都是建在悬崖边的建筑。三德山在昭和9年（1934年）7月7日被定为国家名胜古迹。