William Peveril den yngre arvet sin fars eiendommer som i 1155 ble konfiskert av kong Henrik II. Mens festningen var i kongelig eie besøkte Henrik den i 1157, 1158, og 1164, den første gangen som vert for kong Malcolm IV av Skottland. Under opprøret i 1173–1174 ble festningens garnison økt fra portvakt og to vaktmenn til en styrke på 20 ridder delt med festningene Bolsover og Nottingham. Jarlene av Derby hadde et krav på Peverilfamiliens eiendommer gjennom ekteskap, og i 1199 betalte William de Ferrers, 4. jarl av Derby, 2000 mark for herresetet Peak, men festningen forble i kongelig kontroll. Det nærmeste Peveril Castle kom til kamp var i 1216 da kong Johan av England ga festningen til William de Ferrers, men kastellanen nektet å gi fra seg kontrollen. Selv om de begge støttet kong Johan, autoriserte kongen jarlen å bruke makt for å avsette kastellanen, som til sist kapitulerte, skjønt det er ingen bevis for at festningen ble overfalt.