Die Festung wurde mehrfach belagert, aber nie eingenommen. Christian II. belagerte sie 1531, die Schweden umstellten sie im Dreikronenkrieg zwischen 1563 und 1570 insgesamt sechsmal. Im März 1566, als Nils Boije und Nils Sture vier Sturmangriffe führten, gelang es den Schweden den sog. "Roten Turm" zu nehmen, aber sie wurden mit ihm in die Luft gesprengt, als die Norweger den Pulvervorrat im Turm selbst in Brand steckten. Dieses Ereignis wird als "Schwedenschlag" (svensksmälla) oder "Bohusischer Knall" bezeichnet.