I 1304 ble Elfsysla forlent av Håkon Magnusson til hertug Erik Magnusson ettersom den svenske hertugen var trolovet med kongens datter Ingebjørg. Etter at Håkon skiftet side i brødrestriden mellom hertugene Erik og Valdemar på den ene siden og kong Birger Magnusson på den andre, beleiret han Eriks oppholdsted Konghelle og Ragnhildsholmen. Det var i forbindelse med denne konflikten han etablerte Båhus festning.