四寨、四堡完毕，林希得以以端明殿学士、中大夫、河东路经略安抚使、知太原府迁太中大夫、资政殿学士。三年（1100年）正月，宋徽宗登基后，曾与曾布议论众臣，谈及林希，曾布不置可否。林希徙知大名府，上河东边计三策，不久因“词命丑正之罪”被夺职。十月，因中丞丰稷进言，被下诏降端明殿学士，知扬州。十一月，左正言陈祐又言林希之罪，称他身为中书舍人作诏书谴责吕大防时指名宣仁皇后为“老奸”，略无忌惮；又说苏辙试贤良对策时已有异志；之前文彦博子集贤殿修撰、提举明道宫文及甫攻击刘挚也是林希造成的；如今却罪大责轻，望重行降黜