Sandwich var en av Cinque Ports (de fem havnebyer) og har fortsatt mange originale middelalderbygninger, inkludert flere bygningsvernede puber og porter i den gamle bymuren, kirker, fattighus, og den hvite mølle som ble bygd i 1760. Mens byen tidligere var en betydelig havn, ligger den i dag rundt 3 km fra havet, men dets historiske senter er bevart.