Den første bosetningen var sentrert på toppen av hva som er dagens ås kalt King Street hvor det opprinnelige markedsplassen utviklet seg. På toppen av åsen sto det også et gammelt møtehall, «Moot Hall», fra til 1914, og flere vertshus etablerte seg der i løpet av århundrene, og en del eksisterer den dag i dag. I vest var et herskapshus og rett ved lå kirken Church of St. Martin; deler av kirken er datert tilbake til rundt 1200. Herskapshuset i Alfreton spredte og overtok landområder i sør og øst, inkludert sognene i Somercotes, Swanwick, Riddings og Ironville. Den første herre av herskapshuset var jarl Roger de Busli, som delegerte posisjonen til baron Ralf Ingram. Posisjonen ble arvet, gitt bort og solgt i århundrenes løp, helt opp til William Palmer-Morewood, den siste herre av Alfreton, døde i 1957.