Cronstedt ble i 1744 gift med grevinnen Eva Margareta Lagerberg. På andre halvdel av 1700-tallet var hun eier av Bergaholms gård (i nåværende Salem kommune). Ved landeveien (idag Bergaholmsvägen) ble det i 1765 reist en kvartmils milestolpe med teksten: . C.J.C står for Carl Johan Cronstedt og E.M.L. for hans hustru Eva Margareta Lagerberg. Gjennom arv fortsatte Bergaholms säteri å være i slektens eie helt fram til 1843.