หลังจากยุทธการที่วอเตอร์ลูและเป็นหายนะครั้งที่สองของจักรพรรดินโปเลียน อดีตพระเจ้าโคเซทรงซื้อทรัพย์สินในรัฐนิวเจอร์ซีย์ใกล้แม่น้ำเดลาแวร์ ด้วยพระราชทรัพย์ที่ได้มาจากการขายภาพวาดสเปนที่ทรงนำมาจากการรื้อค้นพระราชวังมาดริด, ปราสาท, อารามและศาลากลางของเมือง ใน ค.ศ. 1816 พระขนิษฐาของพระนางซึ่งก็คือ พระนางเดซีเร ซึ่งเป็นมกุฎราชกุมารีแห่งสวีเดน ทรงหวังจะนำพระนางจูลี พระเชษฐภคินีมาประทับร่วมกันเมื่อทรงเสด็จกลับสวีเดน อย่างไรก็ตามพระสวามีของพระนางเดซีเรเห็นว่าการกระทำเช่นนี้เป็นเรื่องที่โง่เขลา เนื่องจากพระนางจูลีเป็นพระบรมวงศานุวงศ์ราชวงศ์โบนาปาร์ตและการปรากฏของพระนางอาจจะเป็นการแสดงสัญญาณว่าพระองค์อยู่ฝ่ายเดียวกับอดีตจักรพรรดินโปเลียนซึ่งทรงถูกปลดจากราชบัลลังก์ และในที่สุดเรื่องนี้ก็ไม่เกิดขึ้น