Han var sønn av John de la Pole, 2. hertug av Suffolk og Elizabeth Plantagenet. Omkring 1497 giftet han seg med Katherine Stourton. Det ser ikke ut til at paret fikk barn.