Hildebert ble født av fattige foreldre i Lavardin, og ble bestemt for kirken. Han var sannsynligvis en disippel av Berengar av Tours, og ble mester ved skolen i Le Mans. I 1091 ble han erkediakon.