Etter Danneskiold-Laurvigs tilbakevenden til Norge, tok Ingeborg fra 1770 opphold på gården i Hedrum ved Laurvig sammen med ham. Forholdet avstedkom den københavnske vits: Men paret giftet seg ikke, og da han døde i 1783, giftet hun seg i stedet 7. november samme år med den svenske eventyrer Carl Ingmann von Manderfeldt (1747–1813), en mann som i grevens siste levetid hadde tilhørt deres omgangskrets. Paret reiste en minnesøyle i marmor til minne om den avdøde greven.