Вскоре после смерти Маргарет Ральф Невилл женился вторично — на Джоан Бофорт, незаконнорожденной и позже легитимизированной дочери Джона Гонта, герцога Ланкастера, от Кэтрин Суинфорд. В 1397 году он получил титул графа Уэстморленда. От второго брака у Ральфа также родилось многочисленное потомство. По завещанию Ральфа, составленному в 1424 году, он лишил детей, родившихся от первого брака, большинства владений, переданных детям от второго брака. Старший сын, Джон Невилл, умер раньше отца, его сын Ральф в завещании даже не упоминался. Ещё один сын, Ральф, женатый на дочери Джоан Бофорт от первого брака, по завещанию отца получал только маноры и Стифорд в Нортумберленде. Основная же часть владений была унаследована сыновьями от второго брака. Ральф Невилл, унаследовавший в 1425 году титул графа Уэсморленда, в результате действий деда, которые названы историком Чарльзом Россом «амбициозным семейным мошенничеством», лишённый большей части законного наследства, безуспешно пытался его вернуть. Хотя по урегулированию 1443 года он смог получить Рэби, но остальные владения так и остались у потомков Джоан Бофорт. Во время войны Алой и Белой розы потомство 1-го графа Уэстморленда оказалось по разные стороны: внуки Маргарет Стаффорд были сторонниками Йорков, а дети и внуки Джоан Бофорт — Ланкастеров.