廷当中的权势日盛，与朝廷遂产生矛盾。
经过.征和元年（前92年），丞相公孙贺之子公孙敬声因为贪污北军公款被捕入狱，公孙贺为了给儿子抵罪，亲自抓获了当时被通缉的阳陵的知名游侠朱安世。安世出于报复，在狱中上书揭发公孙敬声与阳石公主私通，并宣称公孙一家在甘泉宫驰道埋木偶人诅咒汉武帝。公孙贺父子被下狱后死在狱中，家人全被斩杀，同时还牵连阳石公主，和皇后卫子夫所生的另一个女儿诸邑公主以及卫青的长子卫伉全部被杀。卫氏在汉廷内部的政治盟友也因此损失殆尽。当时汉武帝的宠臣江充曾得罪太子