Et benediktinerkloster viet Johannes Døperen, gjerne kjent som Colchester Abbey, sto i byen inntil oppløsningen av klostrene under reformasjonen. I 1539 ble den siste abbeden henrettet, og klosteret ble revet. Alt som er bevart er porten og en liten kirke med tretårn som var bygget for legarbeiderne i klosteret. Det finnes også åtte andre middelalderkirker (normanniske) innenfor murene.