Den 8. august 1812 giftet hun seg i Porsgrund med sin slektning fra Løvenborg, Eggert Løvenskiold. Han hadde etter farens død arvet Holden Jernverk på Ulefoss, der paret tok opphold. Her fødte Frederikke flere barn, deriblant den senere ballettkomponist Herman Severin Løvenskiold. De andre var Ove Rammel (død som toårig i 1818), Frederikke Juliane Marie (f. 1817) og Marie Charlotte Wilhelmine (f. 1821).