斯的背景很复杂。休斯父亲的祖母及外祖母都是黑奴，他的父亲的祖父及外祖父都是肯塔基州的畜奴白人。据休斯说，他们其中一个名山姆·克莱（Sam Clay），是一个亨利县的苏格兰裔美国威士忌酿酒师，据说是政治家亨利·克莱（Henry Clay）的亲戚。另一个是克拉克县犹太裔奴隶贩子西拉斯·库森比（Silas Cushenberry）。休斯的外祖母玛丽·帕特森（Mary Patterson）是一名非洲裔美国人，有法国，英国和美洲原住民血统。她是第一批参加奥伯林学院的妇女之一，她在入学之前和刘易斯·谢里丹·雷里（Lew