Stedsnavnet kommer fra herregården, som er første gang dokumentert i 1203 som land gitt til Adam og Matilda de la Claie av Richard de la Claie. Familien hadde eiendommen i rundt hundre år før den fikk flere eiere. I et skjøte fra 1410 nevnes den med skrivemåten Clayhall. Et nå lite brukt navn for hva som er hovedsakelig den nordlige delen er Claybury.