À sa naissance, son père, Antoine Certain Canrobert, ancien capitaine, est âgé de 55 ans. Cet officier de l'Ancien Régime a émigré en 1791 et servi à l'armée de Condé. Son demi-frère, Antoine, brillant officier issu de Saint-Cyr, a été tué par un boulet de canon à Fleurus le , en combattant pour l'Empereur Napoléon.