El segundo periodo como califa sólo se extendió hasta agosto de 1023, cuando Al-Cásim, ante la sublevación de los cordobeses por su mal gobierno, se vio obligado a refugiarse en Jerez, dejando Córdoba nuevamente en manos de su sobrino Yahya.