后，升端明殿学士、签书枢密院事兼参知政事，依然兼修玉牒。绍兴十五年（1145年）罢职，提举太平观。开始，杨愿与张扩在中书省任职，同时起草诏命，靠张扩润色。张扩作《二毫笔诗》，杨愿以为他责骂自己，向秦桧诉说，利诱御史李文会弹劾。高闶陪侍经筵，宋高宗问张九成是否安好，第二日，又问秦桧，秦桧说：“张九成提倡异端妖言惑众，被台臣弹劾，管理地方，就竭力请求领祠。观其意向，终不为陛下用。”宋高宗说：“张九成清贫，不可无禄。”秦桧怀疑高闶推荐张九成，于是告诉杨愿，杨愿又让李文会弹劾高闶。藤州守臣说贬官李光作诗讽刺时政