I årene 1923-1925 opplevde klubben nedgang, fordi interessen stoppet opp. IIL slo seg sammen med en annen gutteklubb som tilhørte området, kalt "Smart", men navnet Innstrandens IL ble beholdt.