天子驾到都不害怕，为什么害怕汪太监？”阿丑说：“我只知有汪太监，不知有天子。”自此以后汪直逐步失宠。此时王越和陈钺讨好汪直，三人结为死党。阿丑一日有在做戏，自己扮演汪直手持双斧向前前行，有人问其缘故，答说：“这双斧是王越和陈钺。”宪宗听后微笑了一下。御史徐镛等人弹劾汪直欺君枉法，擅开边衅。其后，明宪宗对他渐渐疏远，让汪直外出镇守大同、宣府，其后贬往南京。正史后续无提及汪直结局，有指其在南京去世，一般认为其得善终。