私憾遭祸.建元四年（482年），齐高帝去世，齐武帝即位，召崇祖为散骑常侍、左衞将军，但不久又下令他留下本任，加号安西将军，但接着还是召他回朝任五兵尚书，领骁骑将军。原来往日齐武帝还是皇太子之时正忧心高帝会将储君之位转予弟弟豫章王萧嶷，崇祖却一直没有依附他。崇祖在成功防御北魏进攻后得诏还朝与高帝密议，这引起武帝的怀疑，遂特意礼待崇祖，并在酒后向崇祖说：「一直流传的流言我都没有放在心内了，今天之后，我的富贵就託付给你了。」崇祖遂下拜陈谢。可是，崇祖走后却接到荀伯玉宣布高帝边境有事的口敕