Djerba er kjent som et senter for den islamske sekten ibadisme (en konservativ form for islam som skiller seg fra både sunni- og sjiaislam). Djerba er også kjent for sin jødiske minoritet som har bodd på øya i mer enn 2500 år, skjønt den jødiske befolkningen har gått kraftig tilbake grunnet forfølgelse fra det muslimske flertallet, og de fleste har utvandret til Israel og Frankrike. El Ghriba-synagogen på Djerba er en av de eldste i verden og samtidig en av de mest kjente. Legenden hevder at den ble opprettet etter ødeleggelsen av det første tempelet i Jerusalem. Den var en gang kjent som øya til kohanim, hebraisk for en jødisk prestekaste, en stor andel av det tidligere samfunnet hevdet å være på farssiden direkte etterkommere av Aron, bror av Moses og den første jødiske ypperstepresten. Djerba har etter hvert også fått en betydelig minoritet av maltesiske katolikker som etablerte seg på øya som svampfiskere.