Oxford fue fuertemente dañada durante la invasión normanda de 1066. Después de la conquista, la ciudad fue asignada a un gobernador, Robert D'Oyly, quien ordenó la construcción del Castillo de Oxford para reafirmar la autoridad normanda sobre la zona. Se cree que el castillo nunca ha sido utilizado con fines militares y sus restos han sobrevivido hasta nuestros días. D'Oyly estableció una comunidad monástica en el castillo consistente en una capilla y cuartos para los monjes ("St George in the Castle"). La comunidad nunca creció mucho, pero ganó su lugar en la historia como uno de los lugares más antiguos de educación formal de Gran Bretaña. Fue allí donde en 1139 Godofredo de Monmouth escribió su "Historia Regum Britanniae", una recopilación de la materia de Bretaña.