Ekteskapet med Sophie von Lenthe tok slutt i 1800. I 1807 giftet Hardenberg seg med skuespilleren og sangeren Charlotte Schönemann (født 1772).