Aunque su abuelo materno era el conde de Ashburnham quien más influyó en él fue el paterno, que nació en Francia y le inculcó las costumbres y el pensamiento propios de un aristócrata francés del Antiguo Régimen.