På 1000-tallet økte byens betydning da normannerne bygde bymur og en stor festning. Linjen muren fulgte er bevart i gatenettet (Bridge Street, The Drapery, Bearward Street og Scarletwell Lane). Byen vokste raskt. I (1086) er det registrert omkring 1500 innbyggere fordelt på 300 hus.