Rabbi Abraham ibn Daud beskrev Joseph i rosende ordelag, men sa at han ikke var fullt så udmyk som faren, etter en uppvekst i luksus. 1906-utgaven av fastslår at arabiskre kronikører nedtegnet at han verken fulgte sine fedres tro, eller noen annen tro, men det betviles at han noensinne skal åpent ha erklært islams prinsipper som absurde. Arabiske diktere priste hans åpenhet.