Faren hadde hatt militær kommando under det korniske opprøret 1497. Han var overhode for en yngre gren av en gammel slekt i Somerset, som hadde sete i Pawlet eller Paulet ved Bridgwater. Williams oldefar fikk familiens eiendom i Hampshire da han gifte seg med Constance, barnebarn og medarving etter Thomas Poynings, baron St John av Basing.