Det var vanlig på den tiden Aimée du Buc de Rivéry forsvant til havs at skip blir overfalt av pirater, og at deres passasjerer ble solgt på slavemarkeder i Nord-Afrika eller Midtøsten, og kvinner da ofte til haremene. Historien om at Aimée ble solgt til et harem var i og for seg ikke utenkelig den gang, om skipet faktisk var blitt av pirater. Men skipet kan jo også like så godt ha sunket. Historien om Amiée kan ha blitt funnet på som en romantisk fortelling i etterhånd, ettersom tanken om de to kusiner som ble keiserinner i Øst og i Vest var en forlokkende historie i ettertid. Den bygger også på mange eldre myter.