El templo resultó gravemente dañado a principios de la Edad Media con el hundimiento del techo y la construcción en sus proximidades de la iglesia de los santos Sergio y Baco, situada entre el templo y el arco de Septimio Severo, en la esquina izquierda del templo de la Concordia.