I 1984 spilte SB en god sesong og resultatet ble opprykk etter en dramatisk serieavslutning. I 1985 havnet Ballklubben midt på tabellen i 3. divisjon etter en variabel sesong. I 1986 kjempet SB lenge mot Råde om opprykksplassen, men måtte se at Østfold-laget rykket opp.