Omkring 1452 blev Elizabeth Woodville gift med sir John Grey af Groby, arvingen til Baroniet Ferrers of Groby. Han faldt under Det 2. slag ved St. Albans i 1461 for Huset Lancaster. Det blev meget ironisk, da Elizabeths fremtidige mand, Edvard 4., var den Huset Yorks tronprætendent. Elizabeth Woodvilles to sønner fra første ægteskab var Thomas (senere Markis af Dorset) og Richard.