Charlotte var født på Fossum som datter av Carl Rudolph Schubart (1714–59) og Inger Løvenskiold (1732–1808). Faren døde da hun var to år gammel, noe som medførte at moren tok henne med til Løvenskioldfamiliens danske gods Løvenborg hvor hun vokste opp sammen med sin søster.