Carl Ludolf war in erster Ehe mit Dorothea Friederike Charlotte von Enckvort verheiratet, in zweiter Ehe mit Johanna Sophia Dorothea Georges, die nach dem Tod von Carl Ludolf in zweiter Ehe Friedrich Wilhelm Richard von Arnim auf Groß Sperrenwalde heiratete. Carl Ludolf von Arnim war kurfürstlicher Geheimrat und Kgl. Preußischer Regierungspräsident zu Minden (Nordrhein-Westfalen). So sind sechs der sieben Kinder der ersten Ehe in Minden geboren, fünf Söhne und eine Tochter. Die Kinder der zweiten Ehe starben im Kindesalter oder jung, und hinterließen keine Nachkommen. Die Tochter Caroline Friederike Henriette war Stiftsdame in Neuenheerse, später Seniorin im Jena'schen Fräuleinstift in Halle (Saale). Sie war Dame des Königlich Preußischen Louisenordens. Erbe von Gerswalde war der zweitälteste Sohn Friedrich Wilhelm Carl. Sein älterer Bruder Otto Gustav Friedrich begründete einen neuen Zweig der von Arnim in Meißen bei Minden. Der nächstjüngere Bruder Carl Friedrich Julius erwarb Zollchow und Schwarzensee und der drittjüngste Bruder Heinrich August Friedrich heiratete ebenfalls in Gegend um Minden. Der jüngste Bruder Wilhelm Friedrich Ferdinand fiel als Leutnant des Königreichs Westphalen auf Napoleon's Russlandfeldzug 1812 bei Wilna. Carl Ludolf Bernhard von Arnim war nach Übernahme von Gerswalde Abgeordneter des Preußischen Landtags. Er starb am 22. November 1829 in Gerswalde.