Jean-François Marmontel ble født av fattige foreldre. Faren var skreddermesteren Martin Marmontel (født 1690) og moren var hans hustru Marianne Gourdes (født 1700). Han hadde to yngre brødre, Jean (født 1731) og Antoine François Marmontel (født 1735) og de fire søstrene Anne (født 1727), Marie-Jeanne (født 1728), Antoinette (født 1730) og Jeanne (født 1739).