2세기 초반, 현재 성당의 유적지는 아프로디테 신전이었다. 몇몇 고대 작가들은 그 신전을 아프로디테를 그리스식 해석으로 대신하여 베누스 신전으로 묘사했다. 에우세비우스는 그의 저서 "콘스탄티누스의 삶" 에서 본래 그 성당의 유적지는 기독교의 존숭지였지만, 하드리아누스는 기독교를 혐오했었던 것으로 추측되며 그 때문에 그 성당 부지들을 고의적으로 매장하고 꼭대기에 그의 신전을 세웠다고 주장했다.(진위 여부는 아래 참조) 에우세비우스의 짧은 언급에도 불구하고, 아프로디테 신전은 70년에 유태인의 반란과 132~135년에 바르 코크바의 반란이 일어난데 이어 대체로 하드리아누스가 135년에 그의 아엘리아 카피톨리아로 예루살렘을 개조한 도시의 일부였다.