Hugh var nevø av brødrene Stefan av England og Henry av Blois, født som den yngre sønnen av Hugh, herre av Puiset, og Agnes, søster av Stefan og Henry. Agnes’ foreldre var Stefan, greve av Blois og Adela, datter av Vilhelm Erobreren. Hans familie på farssiden hadde holdt et adelskap i nordlige Frankrike. Hugh ble født ca. 1125 ettersom i 1153, ved hans valg som biskop, var han fortsatt under den kirkelovlige alder for biskoper som var 28 år. Henry av Blois skaffet Hugh posisjonen som erkediakon ved Winchester bispedømme en gang før 1139.