御城堡变得不那么重要了。1495年亨利七世正式取消加的夫城堡和周边地区的边境领主地位，把它们规入正统英格兰法律，设立格拉摩根郡。1513年国王把加的夫城堡封给查尔斯·索默塞特。查尔斯在加的夫时住在城堡里。1550年后来的彭布罗克伯爵威廉·赫伯特从爱德华六世买下加的夫城堡和它周围的土地。当时城堡的外庭里有一些建筑，在16世纪里在城堡上不断有建筑工程进行。郡府也建在外庭，组成包括传统的十二名守卫骑士的住房在内的外墙建筑。外庭里还有果园、花园和一座小教堂。在16世纪里城堡继续被用来关押罪犯，尤其黑塔被用座监狱