Etter finalesesongen maktet ikke Sparta å opprettholde posisjonen blant landets aller ypperste lag. I 1965 rykket de ned fra 1. divisjon, og forble stort sett der fram til sammenslåingen med Bragerøen i 1983, riktignok med en gjesteopptreden i toppserien i 1969/70. I 1983 tok Sparta for øvrig sølv i NM i gutteklassen, etter finaletap for Stabæk.