Moorways hade endast använts av klubbar eftersom det stängdes för allmänheten i början av 2016 på grund av underhållskostnader.
Nu har kommunfullmäktige och klubbarna sagt att det är för dyrt att fortsätta. Den kommer att vara stängd i slutet av januari.
Dubbel guldmedaljör Ross Davenport tweetade utmärkelserna som vanns av Derby simmare, medan andra märkta flytten "förrädisk" och "löjlig".
Moorways, som byggdes för mer än 40 år sedan, har kämpat med underhålls- och arbetsmiljöfrågor.
Dess förlust blev mer akut genom den pågående stängningen av huvudpoolen vid närliggande Queen's Leisure Centre, på grund av strukturella problem, även om två andra pooler fortfarande är öppna för allmänheten i centrum.
Peter Spink, ordförande i City of Derby Simning Club, sade att de hade träffat rådet flera gånger över stigande kostnader.
"Anläggningen kunde helt enkelt inte göras att vara livskraftig i det sätt det var att drivas längre", sade han.
"Så vi fattade beslutet att vi skulle dra oss ur förr snarare än senare så att vi kunde sluta ådra oss ytterligare kostnader."
Men före detta olympiska och samväldet simmare Ross Davenport twittrade: "Så glad att staden inte har producerat en olympisk mästare, 2 olympiska, 8 världen, 10 samvälde och 14 europeiska simmedaljer under de senaste 10 åren!"
Paula West var en av ett antal människor att svara, säger: "Derby Clubs kan inte ens komma åt pooltid i sin egen stad, att behöva resa överallt annars #absolut äcklad".
Rådet sade att det beklagade situationen men problemen med Drottningens fritidscenter var "oförutsebara" och det arbetade mot planer för en ny 50m pool på Moorways plats.
Öppnandet av detta har dock redan gått från 2018 till 2020.
En före detta Olympian säger att han är bestört över en av Derbys sista stora simbassänger.