Voldberg studerte ved BI i tidlig i 1980-årene, men avbrøt studiene for å drive aksjehandel på heltid. Voldberg kjøpte i 1996 Skøyen hovedgård, hvor han begynte en større restaurering. Han eier også slektsgården Søndre Aspestrand ved Aspern i Aremark i Østfold, hvor det drives svineproduksjon.