Un de ses ancêtres, nommé de Haville, était normand et compagnon de Guillaume le Conquérant, avec lequel il participa à la conquête de l'Angleterre en 1066.