У време норманске инвазије у 11. веку Чичестер је имао око 300 кућа и око 1500 становника. После Битке код Хејстингса град је додељен Рожеру де Монгомерију, грофу од Шрузберија, за исказану храброст у бици. Он је изградио замак да би консолидовао норманску власт. Око 1143. настала је титула грофа од Арундела која је припала локалном властелину.