Kastellets konstruksjon har gjennom enkle arkeologiske undersøkelser vist seg å ligge i et rektangulært plan på 18 x 20 meter (360 m²) noe som gjorde kastellet til den største tårnbygningen fra middelalderen i Norge. Tårnets størrelse tyder på at kastellet var av en europeisk type med engelsk og skotsk inspirasjon. Murene av lokal kalkstein var rundt tre meter tykke, og tårnet var sannsynligvis derfor på minimum fem etasjer eller over ti meter høyt. Den inneholdt bolig, kapell, hall, fengsel og ulike forsvar i én og samme bygning.