Fra Tønsberg stevnet så 25 til 35 skuter ut i fire grupper under hver sin leder. De ble informert om at birkebeinerne var kommet forbi Jæren og Lista, så de snudde og satte kursen for Portør i Telemark. I tykk skodde greide birkebeinerne og deres flåte å seile forbi, og baglerne var utmanøvrert. Baglerne seilte ut i farvannet innenfor Jomfruland og nådde fram til Stavern. Der gikk de i land for å unnslippe birkebeinerne, som seilte videre opp mot Byfjorden som ledet inn til Tønsberg. Tre skuter tok seg videre og fikk varslet kong Filippus Simonsson. På Møllebanken rådførte kongen seg med de andre stormennene, som etter forslag fra Arnbjørn Jonsson besluttet seg å ta ut storskipene.