Fra 1731 var Wedel Jarlsberg medeier i det nyanlagte bly- og sølvverk på Konnerud ved Drammen, som han fra 1736 ble eneeier av. Her døde han på Wedelsgaard den 22. september 1738, antagelig som følge av såret han hadde pådratt seg i Afrika. Han ble stelt og balsamert i Drammen, og liket ble seilt til Jarlsberg hvor han ble bisatt i Sem kirke.