Здание построено за счёт средств Марка Випсания Агриппы, зятя императора Гая Октавиана Августа, в 27—25 годах до н. э. в память о морской победе Октавиана Августа в 31 году до н. э. при мысе Акциум над флотом Антония и Клеопатры (флотом Октавиана командовал Марк Агриппа). Храм дважды страдал от пожара (в 80 и 110 годах). В 118—120 годах н. э. воссоздан императором Адрианом с сохранением на фризе старой посвятительной надписи от имени Марка Агриппы: «М. AGRIPPA L .F. COS.TERTIVM FECIT» (Марк Агриппа, сын Луция, избранный консулом в третий раз, построил).