Louise-Élisabeth var datter av maleren Louis Vigée (1715–1767) og frisøren Jeanne Maissin (1728–1800). Hun ble født i Paris i Rue Coquilliere og døpt i kirken St. Eustache med navnet .