To år etter ansatte hertugen en ny byggmester, Hercules von Oberberg, som også siden bygget hertugens jaktslott Grøngård. Hans selv var dypt involvert i byggeriet og tok seg av både praktiske og administrative gjøremål. Han har hatt bestemte meninger om hvordan slottet skulle bli seende ut, og det har derfor trolig fra begynnelsen av vært meningen at Hansborg skulle bli et lukket, firesidet anlegg.