Som med kirken, måtte Heltzen også innenfor Sølvverket føre videre det som forgjengeren, Stuckenbrock, hadde startet. Det ble satset på en rekke nye gruver, og aktiviteten vokste. Sølvverkets virkeområde utvidet seg slik at det strakte seg fra Kisgruva i sør til Vatnebrynvatnet i nord, og fra Helgesvann i vest til Dørsjø i øst. Utgifter til lønninger steg i været. Heldigvis for Heltzen ble det i de første årene av hans tid gjort gode sølvfunn, slik at verket viste balanse og til og med overskudd. Etter et rekordår i 1768 var det imidlertid slutt og nedgangstidene begynte. Da var Kongsberg blitt en by med 8000 innbyggere, der 4000 var bergarbeidere. Protestene økte mot den måten Heltzen ledet Sølvverket på. Han skulle til København for å gjøre rede for driften, da han døde 10. september 1770.