Etterhvert som guttene ble voksne, økte motsetningene mellom dem. Da rådgiverne til Inge og Sigurd var døde, fikk guttene seg hver sin hird. Inges fremste mann ble da Gregorius Dagsson, som fikk ansvaret for landsstyringen sammen med Inge. Inge ble regnet som vennlig og gavmild, og var populær på grunn av dette. Både Sigurd og Øystein ble derimot regnet som villstyringer. Øystein skal ha vært «pengekjær og egennyttig», mens Sigurd hadde rykte som kvinneforfører. Bare 14 år gammel ble han far til sønnen Håkon, som han fikk med tjenestejenta Tora. Snorre forteller at Øystein var med i flere slag på i England og Skottland, blant annet i Aberdeen og i Withby i Yorkshire. Her skal han ha brent flere byer og herjet. Snorre lar det skinne gjennom at ikke alle var like begeistret for dette, i det han skriver at «folk dømte svært ulikt om denne ferden».