I 1388 giftet han seg med Eleanor Holland, datteren til jarlen av Kent. Han var far til Anne Mortimer og Edmund Mortimer, 5. jarl av March.