I 1976 rykket Godset ned til 2. divisjon. Strømsgodset satset på opprykk i 1977-sesongen, men det mislyktes. I 1978 rykket laget ned i 3. divisjon, og var med det ute av norsk toppfotball for en tid. I 1982 rykket Strømsgodset opp til nest øverste. Der holdt Godset seg til 1986, da SIF rykket ned til 3. divisjon og klubbhuset brant ned til grunnen.