Nicméně, její dědictví bylo zpochybněno Anninými nevlastními sestrami, dětmi z otcova prvního manželství s Alžbětou, dědičkou Berkeley. Jedna z nich, Lady Eleonora, se provdala za Edmunda Beauforta, 1. vévodu ze Somersetu (zavražděn roku 1455 v První bitvě u St Albans). Spor o Warwick byl pouze podnítil nepřátelství mezi Nevillovými a Beauforty, kteří byli úzce spříznění. Manžel Anny Beauchampové, Richard, byl vnukem Jany Beaufortové, setry vévodova zesnulého otce. Anna měla jakožto vlastní teta poslední hraběnky na Warwick větší právo, než její starší nevlastní sestry. Richardu Nevillovi se nakonec podařilo udržet Warwick neporušený.