Da toppdivisjonen ble omgjort til én gruppe i 1963 klarte ikke Odd å kvalifisere seg. Klubben kom tilbake i 1965, men etter nedrykket i 1967 tok det 32 år før Odd igjen var i øverste divisjon, men i 1969 hadde klubben rykket ned i daværende 3. divisjon. Pors’ opprykk til øverste divisjon samme år betydde at Odds hegemoni i distriktet var over. Gjennom hele 1970-årene befant Odd seg i 2. divisjon. I både 1975, 1976 og 1977 tapte Odd kampen om opprykk i omspillet. 1980-årene var preget av opp- og nedrykninger mellom 2. og 3. divisjon.