很快又被乔弗里夺回。爱德华一世治下，乔弗里一直是城堡的主人，直至1314年逝世。城堡的城墙、大堂和起居室都是他在13世纪后半叶建造的。
14世纪.乔弗里和莫德的长孙女琼（Joan de Geneville）在1301年嫁给了罗杰·莫蒂默，后者因此成为城堡的主人。1320年左右，罗杰建造了在原来的大堂（Great Hall）和起居室旁边建造了Great Chamber。1321年至1322年间，莫蒂默参与德斯潘赛战争，战败被爱德华二世俘虏，囚禁于伦敦塔，但后来设法逃至法国。他和法