Byen er kjent for sin arkitektoniske-, natur- og kulturarv. Ipswich søker å bevare og bruke mange av sine historiske bygninger. Byen har mer enn 6000 verneverdige bygg eller områder og over 500 parker. Ipswich startet i 1827 som et gruvesamfunn.