I angelsaksisk tid begynte bosetningen, som til da hadde vært liten og spredt, å vokse på grunn av den praktiske havnen. Det hevdes at Gippeswick var den første angelsaksiske byen, og kongedømmet East Anglia var en periode sentrert omkring byen.