Er heiratete "Louise von Zwierlein", eine Tochter des Advokaten und Prokurators am Reichskammergericht Wetzlar dem Reichsfreiherrn Christian Jacob von Zwierlein (1737–1793). Ihre Tochter Luise Sophie Frederike Eleonore (* 16. August 1797; † 20. März 1819) heiratete Karl Ludwig Friedrich Leutrum von Ertingen (* 27. August 1791; † 18. Dezember 1852). Der ältere Sohn, Carl Benedix (* 3. November 1791; † 19. August 1853) übernahm 1836 Cadenberge und erhielt den Primogenitur-Grafentitel, wurde Kriegsrat sowie Stallmeister und heiratete "Sophie von Staffhorst" (* 10. Februar 1805; † 10. Juni 1891). Der jüngere Sohn, Georg Friedrich Hans Wilhelm (* 1802; † 1857) übernahm als Freiherr das Gut Eimbeckhausen, wo er im Gewölbe der St. Martinskirche neben Adolph Wilhelm von Bremer († 1830), bestattet wurde. Während den Unruhen der Märzrevolution 1848 musste Georg Friedrich auf die Patrimonialgerichtsbarkeit verzichten, die im Königreich Hannover 1858 auch per Gesetz vollständig abgeschafft wurde.