Den isolerte beliggenheten førte til at kirken overlevde bybrannen i 1666. I 1721 ble den allikevel erstattet av en ny bygning, tegnet av James Gibbs. Designen ble sterkt kritisert i samtiden, men den ble senere svært kjent og er kopiert mange steder i USA. Den har en gavl i klassisk stil og korinthiske søyler. Det høye klokketårnet har en forgylt krone på toppen.