Após a morte de William de Lovetot, a mansão de Hallamshire passou para o seu filho, Richard de Lovetot e, em seguida, ao seu filho William de Lovetot antes de ser passada, por casamento, a Gerard de Furnival em cerca de 1204. Os Furnivals foram donos da mansão nos 180 anos seguintes. O quarto senhor de Furnival, Thomas de Furnival, apoiou Simon de Montfort, na Segundo Guerra dos Barões. Como resultado, no ano de 1266 um grupo de barões, liderado por John de Eyvill, marchando a partir do norte de Lincolnshire para Derbyshire passaram através de Sheffield e destruíram a cidade, queimando a igreja e o castelo.