Walters familie kom fra West Dereham i Norfolk og hvor Walter sannsynligvis ble født. Walter opptrer første gang i Glanvills husholdning i et charter som har blitt forsøksvis datert 1178, skjønt ettersom det er udatert kan det han bli skrevet så sent som 1180. Hans bror Theobald tjente også i deres onkels husholdning. Walters takknemlighet overfor sin tante og onkel er vist charteret for grunnleggelsen av Walters kloster i Dereham hvor han anmode klosteret om å be for «sjelene til Ranulf Glanvill og Bertha hans hustru som fostret oss».