仁天皇将此观音像安置，被确定为该寺的开山，据说原来叫御室户寺。之后， 桓武天皇建立二丈的观音像，其胎内安纳之前的一尺两寸观音像。
平安时代之后.如上所述，关于寺庙的创建传承，具有浓厚的传说色彩，目前还不清楚创建的正确情形。根据园城寺（三井寺）僧侣的传记所编集的《寺门高僧记》中，所收录僧侣行尊的三十三所巡礼和西国三十三所巡礼是相关最早的史料，据说，在11世纪末左右，行尊进行三十三所巡礼时，当时三室户寺是第三十三个，也就是最后的巡礼地。寺院在康和年间(1099-1103年)，由三井寺的