Da Erling døde i 1207, ble Filippus Simonsson valgt til ny konge. Arnbjørn fortsatte nå som Filippus' mann. I 1208 inngikk baglerne og birkebeinerne forlik på Kvitsøy i Rogaland. De to kongene, birkebeinerkongen Inge Bårdsson og baglerkongen Filippus Simonsson, hadde begge med seg utvalgte lendmenn eller sysselmenn da de inngikk fredsavtalen. Arnbjørn var da med på Filippus' side og svor ed på freden.