W 1973 Błękitni spadli z I ligi, zaś zawodnik kieleckiego klubu, Witold Stachurski, wywalczył brązowy medal mistrzostw Europy rozegranych w Belgradzie. W latach 1974–1980 zespół występował w rozgrywkach II ligi. Blisko awansu był w 1977, kiedy zwyciężył w jednej z grup II ligi. Następnie wystartował w turnieju finałowym w Chojnicach, gdzie w połowie meczu z Czarnymi Słupsk, w wyniku niesprawiedliwych decyzji sędziów, zaprzestał walki, natomiast do drugiego pojedynku nie przystąpił. W 1980 roku Błękitni ponownie okazali się najlepszym zespołem II ligi i po raz trzeci uzyskali awans do bokserskiej ekstraklasy. W kieleckim klubie czołową rolę zaczęli odgrywać Sławomir Zapart oraz Stanisław Łakomiec. Ten pierwszy zdominował wagę kogucią w mistrzostwach Polski w latach 80. XX wieku, zaś drugi należał w tym czasie do najlepszych polskich zawodników w kraju w wadze średniej i półciężkiej.