Anne Mortimers mor var datter av Thomas Holland, 2. jarl av Kent og Alice FitzAlan, datter av Richard Fitzalan, 10. jarl av Arundel og hans andre hustru, Eleanor av Lancaster, som var datter av Henry, 3. jarl av Lancaster, barnebarn av kong Henrik III av England. Thomas Holland var barnebarn og seniorarving av Joan av Kent.