Normanneren William Peverel var muligens en sønn utenfor ekteskap av Vilhelm Erobreren. Bolsover ble setet Peverilslekten. På 1100-tallet ble borgtårn bygget, Bolsover Castle. Den nåværende festningen ble reist i 1613.