Fue el menor de los cinco hijos del segundo matrimonio de Jean Challe, pequeño burgués y pequeño funcionario.