三妃相继失宠。于是李瑛、李瑶与李琚兄弟常为母亲不得宠而不乐，多有怨言。惠妃之女咸宜公主的驸马杨洄揣摩惠妃的心意，便每天观察李瑛有何短处，并向惠妃报告毁谤。武惠妃为人颇有心计，向玄宗哭诉太子结党营私，想要谋害她们母子。玄宗震怒，欲废太子。中书张九龄以骊姬、江充、贾南风与文献皇后等人故事劝谏玄宗不能废太子，此事遂作罢。不久，张九龄罢官，以李林甫取代其位。李林甫揣摩惠妃的心意，时常对她说寿王的好话，惠妃便对他相当敬重。开元二十五年（737年）四月，杨洄再次向惠妃构陷三位亲王，说他们三个与太子妃薛氏之兄薛锈共谋