Miután Anglia 1066-ban normann kézre került, Herefordot William Fitzosbern kapta meg, Hódító Vilmos egyik legközelebbi szövetségese, aki feladatul kapta az ország ezen része védelmének megszervezését a walesi betörések ellen. Ekkor épült meg Monmouth vára, a vidék meghatározó jelentőségű védműve. Eleinte egy motte&amp;bailey típusú vár volt, majd a későbbiekben többször is megerősítették és átépítették. A vár körül épült ki a város és 1075-ben Withenoc egy bencés szerzetházat is építtetett. Withenoc lett a város ura, miután Roger, Hereford 2. grófja, William FitzOsbern fia kegyvesztett lett. Valószínűleg ebben a szerzetházban élt egy ideig Geoffrey of Monmouth, a híres "Historia Regum Britanniae" () szerzője.