Dumas var sønn av marki Pailleterie og en svart slavinne, Marie-Césette Dumas. Ifølge forfatteren Tom Reiss var det mulig for en sort mann å gjøre karriere fordi revolusjonen langt på vei hadde avskaffet slaveriet og innført raselikhet.