William de Ufford era il quartogenito di Robert de Ufford, I conte di Suffolk (10 agosto 1298-4 novembre 1369) che fu il primo della sua famiglia ad essere insignito del contado di Suffolk nel 1337 per volere di Edoardo III d'Inghilterra, Robert infatti aveva combattuto lealmente per il sovrano durante la Guerra dei cent'anni e quella doveva essere una ricompensa. Robert partecipò infatti alla Battaglia di Crécy, all'Assedio di Calais (1346) e alla Battaglia di Poitiers (1356).