Барон Клиффорд из Чадли является старшим из выживших мужских представителей древнего нормандского рода, который позднее принял имя де Клиффорд и участвовал в нормандском завоевании Англии 1066 года. Бароны Клиффорды, правители в Херефордшире, получили титул барона де Клиффорда в 1299 году. Семья Клиффордов по прямой мужской линии происходила от нормандского герцога Ричарда I Бесстрашного (933—996), прадеда Вильгельма I Завоевателя.