Francis Dashwoods klubb var i begynnelsen aldri kjent som en Hellfire Club; den fikk dette navnet eller betegnelsen først langt senere. Faktisk brukte hans klubb en rekke navn, slikt som Brotherhood of St. Francis of Wycombe, Order of Knights of West Wycombe, The Order of the Friars of St Francis of Wycombe og senere, etter å ha flyttet sin aktiviteter til det tidligere klosteret Medmenham Abbey, et herskapshus som Dashwood leide ved breddene av Themsen i nærheten av Marlow i Buckinghamshire, ble de . Det var en grotte under klosterbygningen som Dashwood mente måtte være et gammel hedensk sted og som klubben kunne utføre sine ritualer. Grotten ble dekorert med mytologiske temaer, falliske symboler og andre med seksuelle hentydninger. Dashwood fikk også gjort en rekke kostbare bearbeidelser av bygningen. Det ombygget av arkitekten Nicholas Revett i nygotikk. Mottoet ble satt over døren.