孝瑜又说赵郡王之父死于非命，不可以亲近。于是高叡与和士开都恨上高孝瑜。和士开密告他奢侈僭越。高叡又言：“山东只闻有河南王，不闻有陛下。”武成帝由是猜忌他。武成帝有个御女（低级妃嫔）尔朱摩女，本来是娄昭君的宫婢，高孝瑜先与她通奸，后在河清二年（563年）六月廿八庚申，太子婚夜，高孝瑜偷偷跟她说话。武成帝见状大怒，一顿灌给他饮了三十七杯酒。高孝瑜体形肥大，腰带十围，派娄子彦驾车载出高孝瑜，在车中下毒。至西华门，高孝瑜烦热躁闷，投水而死。谥号康献，追赠太尉、录尚书事。儿子高弘节嗣位。