Nach der kurzen Restauration des Königshauses Lancaster 1470/71 lief zunächst Annes Schwiegersohn George Plantagenet, 1. Duke of Clarence, zu Eduard IV. über, anschließend fiel ihr Mann in der Schlacht von Barnet. Ihr zweiter Schwiegersohn Edward of Westminster starb in der entscheidenden Schlacht von Tewkesbury. Anne floh daraufhin ins Kirchenasyl in Beaulieu Abbey. In der Folge wurden ihr die Güter der Familie Beauchamp, die sie durch ihre Erbschaft in die Ehe eingebracht hatte, entzogen. Plantagenet okkupierte die verfallenen Besitztümer der Familie Neville und forderte im Namen seiner Frau auch die Rechte an den Besitztümern seiner Schwiegermutter. Ihm erwuchs ein Kontrahent durch seinen Bruder Richard, Duke of Gloucester, der 1472 als dessen zweiter Ehemann Annes gleichnamige Tochter (Anne Neville) heiratete, so dass nun zwei Brüder, gemeinsam mit zwei Schwestern, gegeneinander Ansprüche auf die Güter ihrer noch lebenden Mutter und Schwiegermutter erhoben.