Das Pantheon ist der Nachfolger eines Tempels, den der Konsul Agrippa nach seinem Sieg bei Actium von 27 bis 25 v. Chr. zu Ehren seines Freundes und Förderers Augustus am selben Ort hatte errichten lassen. Dieser Vorgängerbau war bereits als Rundbau angelegt und hatte etwa die gleichen Ausmaße und dieselbe Ausrichtung wie das heute zu sehende Gebäude. Er wurde während eines Feuers im Jahr 80 n. Chr. beschädigt und unter Kaiser Domitian restauriert. Eindeutige Spuren dieser Maßnahme konnten nicht nachgewiesen werden. Möglicherweise sind Spuren des zugehörigen Fußbodenniveaus zwischen dem des ersten und dem des heutigen Gebäudes erhalten.