בנו השני של ברנדון ממרי, הנרי, הרוזן מלינקולן, מת ב-1534. לברנדון ולווילובי נולדו שני בנים, הנרי (18 בספטמבר 1535) וצ'ארלס (1537). שניהם מתו ב-14 ביולי 1551 בשל מחלת ההזעה, בהפרש של שעה אחת זה מזה.