Han ble født 28. september 1775 i Mainz, som det 14. barnet av en geheimeråd og leder av Hofgericht (hoffretten) i Mainz, statens øverste domstol. Familien eide i tillegg en vingård på 40 morgen (måleenhet), i Hallgarten i Rheingau. Hallgau er i dag en del av byen Oestrich-Winkel. Itzstein-familien hadde bodd i Hallgarten i mange generasjoner, og vingården kom i inn i familien gjennom bestefarens giftermål med Maria Klara Hardy.