Rikard IIIs første parlament i januar 1484 fjernet alle de landeiendommer fra Elizabeth som var gitt til henne under styret til Edvard IV. Den 1. mars 1484 kom Elizabeth og hennes døtre ut av klosteret etter at Rikard III hadde offentlig sverget en ed om at hennes døtre ikke ville bli skadet eller lide overlast, og at de ikke vil bli stengt inne Tower og London eller noe annet fengsel. Han lovte også å skaffe dem ekteskapsfordeler og gifte dem til adelige ekteskapskandidater. Familien kom tilbake til hoffet, tilsynelatende forsonet med Rikard III. Etter Rikards hustru Anne Neville døde i mars 1485, og han ikke hadde en mannlig arving etter at hans ung sønn tidligere hadde dødd, gikk det rykter om at kongen aktet å gifte seg med sin vakre og unge niese Elizabeth av York, den samme kvinnen som Henrik Tudor hadde sverget på å ekte.