Joan vokste opp ved hoffet til Hugo X av Lusignan. Hun var blitt lovt til ham i ekteskap fra en tidlig alder. Hennes mor, Isabella av Angoulême, hadde vært trolovet med Hugo i sin ungdom, men valgte kong Johan fremfor ham. Som en godtgjørelse for at han var blitt forlatt av Isabella, ble Joan sendt til Hugos slott, og ble oppdratt der. Hugo holdt henne i fangenskap, i påvente av ekteskap og medgift.