Slottet ble opprinnelig bygget som en borg og et tysk forsvarsverk for å overvåke og utøve militær kontroll over den sorbiske befolkningen i området. Oppføringen av den opprinnelige borgen skjedde etter år 929, da Henrik I av Sachsen beseiret den sorbiske stammen Glomacze. Rundt år 1100 var Gauernitz sammen med Grossröhrsdorf og utenverket Kleinröhrsdorf, samt det nærliggende Klipphausen slott i eie av Benno, den daværende biskop av Meißen, som senere ble helligkåret som helgen av den romersk-katolske kirke og pave Hadrian VI i 1523.