I 1197 kom det en ny utfordring til Sverres kongedømme. Flere betydningsfulle motstandere av Sverre, blant annet Inge Krokryggs halvbror Nikolas Arnesson av Oslo, og erkebiskop Eirik Ivarsson møttes i Halör i Skåne (den gang en del av Danmark). Her tok de en gutt ved navn Inge Magnusson, en påstått sønn av Magnus Erlingsson, sannsynligvis vel vitende om at det ikke var sant, som sin gallionsfigur. Den nye fraksjonen ble kalt for «baglerne» (fra norrønt i betydning «bispestav»).