I perioden 1976 til 1982 holdt laget seg godt i 4. divisjon, men i 1983, som var et dårlig år, rykket laget ned og måtte starte i 5. divisjon i 1984. Det skulle ikke gå stort bedre der, for A-laget rykket ned til 6. divisjon. 1986 ble A-laget kretsmestere i 6. divisjon etter å ha slått Heradsbygda 4-1 og 7-2 i KM-finalen, etter blant annet å ha tatt 38 av 44 mulige poeng.