Hans sønner var Elam, Assur, Arpaksjad, Lud og Aram. Han fikk også døtre, sier Bibelen, men de nevnes ikke ved navn. Arpaksjad ble stamfar til Abraham. Sem omtales som stamfaren til flere folkeslag, som derfor ble kalt semitter.