En el siglo XI los normandos construyeron el castillo de Colchester sobre las ruinas del templo romano.