Brittijoukot ryöstivät kongressitalon ja sytyttivät sen tuleen vuoden 1812 sodan aikana 24. elokuuta 1814, mutta rankkasade sammutti liekit ja pelasti rakennuksen täydelliseltä tuholta. Korkeimman oikeuden sali säilyi vahingoittumattomana, mutta muut tilat piti rakentaa uudelleen. Latrobe palasi johtamaan uudelleenrakennustöitä vuonna 1815, mutta erosi kaksi vuotta myöhemmin viivästysten ja kasvavien kustannusten vuoksi. Seuraavana arkkitehtina oli vuosina 1818–1829 Charles Bulfinch. Latroben suunnitelmien mukaan uudelleenrakennetut istuntosalit valmistuivat vuonna 1819, missä yhteydessä senaatin vanha sali sai nykyisen kokonsa ja muotonsa. Latrobe oli yhdistänyt talon etelä- ja pohjoissiivet väliaikaisella puukäytävällä, jonka tilalle Bulfinch suunnitteli uuden keskiosan. Talon keskikohtaan rakennettiin Thorntonin alkuperäisen idean mukaisesti vuosina 1818–1824 Bulfinchin suunnittelema rotunda, jonne sijoitettiin neljä taiteilija John Trumbullilta tilattua maalausta Yhdysvaltain historian tärkeistä hetkistä. Rotundan päälle valmistui vuonna 1824 kuparilla verhoiltu puinen kupoli. Bulfinchin aikana valmistui myös talon krypta vuonna 1827.