Da han leste testamentet så guvernøren i Medina så at Imamen hadde valgt fire personer snarere enn en: kalifen selv, guvernøren i Medina, imamen eldre sønn Abdullah al-Aftah, og Musa, hans yngste sønn. Som et resultat av dette var ikke Mansur i stand til å avslutte imamatet. Men i motsetning til sin far, som hadde vært i stand til å undervise fritt i Medina, måtte Musa al-Kadhim leve med strenge restriksjoner satt av abbasidenes kalifer som al-Mansur og Harun al-Rashid.