Robert Kardashian Sr. era hijo de Helen y Arthur Kardashian. Sus cuatro abuelos eran armenios que emigraron del Imperio ruso a los Estados Unidos a principios del siglo XX, originarios de las ciudades de Karakale y Erzurum en la actual Turquía. La familia abandonó el Imperio Ruso antes de que comenzara el genocidio armenio en 1915.