Rådhuset ble bygget i 1855 og selv om det har gjennomgått modifikasjoner og fornyelser flere ganger, står det den dag i dag relativt likt det opprinnelige bygget. Det samme året brøt den sørlige delen av Danvers ut og ble byen South Danvers, senere omdøpt til Peabody.