座城门才能到达，这座城门有两座原型的塔楼保护，后来这座城门被叫做征服者门。这些防御措施可能也是因为敌对的威尔士亲王卢埃林·阿普·格鲁菲德所造成的威胁而被采取的。理查德的孙子吉尔伯特·德·克莱尔是最后一代男性德·克莱尔，于1314年阵亡，城堡被授予爱德华二世有争议的宠臣小休·德斯潘塞。收成不好和德斯潘塞家族的酷政导致1316年李维林·布伦的起义。起义被镇压后休下令把布伦在加的夫城堡挂拉分。这个处罚在英格兰和威尔士都遭到很多批评，1321年休拘禁威廉·弗莱明骑士作为替罪羊。弗莱明被扣押在黑塔里，后来在城堡里