Gabriel Riesser ble født i en jødisk familie. Begge hans besteforeldre var rabbinere. Hans far Eliesser Lazarus ben Katzenellenbogen, som tok navnet Riesser (1763–1828) hadde fra Nördlinger Ries til Hamburg for der å ta rabbinerstudium. Han arbeidet først som sekretær for jøderetten i Altona og senere som kjøpmann i Hamburg. Gabriels mor var Frommaid Cohen (1767–1847), kalt , og var datter av Altonas overrabbiner Raphael Cohen (1723–1803).