Nel 12 a.C. Augusto, nella sua qualità di pontefice massimo, donò alle Vestali la "Domus Publica", residenza del pontefice dove aveva abitato anche Giulio Cesare. Probabilmente dopo l'incendio del 64 d.C., il complesso venne ricostruito a un livello più alto con una nuova pianta e un nuovo orientamento, in accordo con le altre costruzioni che circondavano la piazza del Foro.