遠い部分の信憑性には疑問があるが、父の司馬談が亡くなる際の遺言によると、司馬遷の家系は堯・舜の時代に功績を挙げ、代々歴史・天文を司る一族であるという。