Hijo del agente de negocios Jean-François Béranger de Mersix y de Marie-Jeanne Champy, una muy pobre familia parisina, a pesar de las ínfulas del apellido paterno, fue un niño melancólico y tímido que fue enviado tardíamente a la escuela, en la que nunca se sintió a gusto; se crio con sus abuelos.