Byen fikk sitt første charter av kong Johan i 1200. Den vokste og ble velstående gjennom tekstilhandel med kontinentet. I 1380 skrev Geoffrey Chaucer satiriske bemerkninger om kjøpmennene i Ipswich i .