ジェームス・J・ジェフリーズ
(ジョンソンに向き直り) もし私の方が先に地下室から出たら、この金の中から君の治療費を出そう。さぁ、君がどうしても私と戦いたくてたまらないのなら、地下室に降りようか。」
ジョンソンは青ざめた。そしてどもりながら次のように言った。 「ミスター・ジェフリーズ! 私は地下室の闘技者ではない!(I ain't no cellar fighter!)私は地下室に行く気はない。私はただ、観客に囲まれた、レフェリーのいるリングであんたと試合したいだけだ。ミスター・ジェフリーズ。私は地下室の闘技者ではない。」
同様の記述は1910年に刊行されたジェフリーズの自伝にもあり、1904年の出来事とされている。ただしそこではハリー・コーベットが用意した金額は2,500ドルとされている。また地下室での決闘を拒絶し立ち去るジョンソンに対しジェフリーズが嘲笑しながら悪態をつく一節が存在するなど、全体的により詳細な記述となっている。なお、この出来事自体はジャック・ジョンソンの自伝および伝記でも言及されており、事実とみられる。ただしジェフリーズ寄りのテキストでは、ジョンソンの臆病さが強調され、ジョンソン寄りのテキストでは、黒人ボクサーをまともな挑戦者と見なさないジェフリーズのレイシストとしての面が強調されるかたちでの言及となっている。
ピーター・ジャクソンは第五代黒人ヘビー級王者であり、かのジョン・L・サリバンが対戦を避けたとされる伝説的強豪である。ジェフリーズは彼を尊敬しており、昔日の面影無く衰えたその姿を対戦時に目にして、悲しみを覚えたという。
ボブ・アームストロングもまた元黒人ヘビー級王者(六代)である。彼はジェフリーズと友好関係にあり、ジャック・ジョンソンとの「世紀の決戦」の際もジェフリーズ陣営についてトレーニングのサポートをした。当時の新聞には、トレーニングの余暇にレスリングに興じる二人の写真が掲載されている。また、試合当日もセコンドとしてジェフリーズを見守った。試合終盤にジェフリーズがダウンした際、タオルをマネージャーに渡したのは彼である。
ジェフリーズとの直接対戦はないものの、サム・ラングフォードもまた、彼をリスペクトしたひとりである。ジャック・ジョンソンが再戦を避けた黒人強豪として知られる彼だが、件の「世紀の決戦」直前の新聞記事の中では、「ジェフリーズが最初のパンチでジョンソンの顎を砕き勝利することを希望する」というコメントを発表し、ジェフリーズの惨敗を目撃した直後にも「全盛期の彼であれば数ラウンドでジョンソンを仕留めていた」と発言している。
拳闘史研究家のジム・カーニー・ジュニアは、ジェフリーズが人種差別に乗せられたことを認めそれを批判しながらも、「彼はジャック・ジョンソン個人のことは好きではなかったが、それ以外の黒人ボクサーには好意的で、リスペクトしていた」と述べている。