Borgen er hovedsakelig bygget av kampesteinskvadre og ligger på en 16 meter høy klippeknaus omgitt av den delvis uttørkede Borresø. En trebro førte ut til Lilleborg som var omgitt av en 76 meter lang ringmur, hvorav rester fortsatt er synlige. For å komme opp til borgen, måtte man passere en dyp vollgrav og en voll for å nå frem til store porttårnet. Innenfor lå en 20,5 meter lang bygning inndelt i to rom. Det fantes ingen brønn på borgen, så alt vann måtte bæres opp fra Borresø. Funn av jernsaker kan tyde på at det ene rommet ble brukt som smie. Tårnets nederste del og fundamenter av andre bygninger er bevart.