Før februar 1506 giftet han seg med Margaret Mortimer, født Neville. Ekteskapet ble annullert i 1506, og paret fikk ingen barn.