I 1806 gikk det rykter om at et barn hun levde sammen med, var hennes sønn. Dersom dette var tilfelle, kunne det også være en arving, dersom det var prinsen av Wales som var faren. Det ble satt opp en hemmelig etterforskning for å finne ut mer om saken, på engelsk kalt "Delicate Investigation". Påstanden ble bekreftet, men det ble funnet ut at faren til barnet ikke var passende. I 1814 forlot prinsessen landet for å bo på ulike steder rundt om i Europa. Hun bygget seg opp en stor gjeld og hadde mange elskere der hun bodde. I løpet av denne perioden døde datteren hennes, Charlotte Augusta, etter å ha fått et dødfødt barn. Charlotte Augustas ektemann, Leopold av Sachsen-Coburg-Saalburg, var den som gav henne den sørgelige beskjeden.