，士大夫多以不恤国事，同俗自媚于众为善。”。元末人仓促修《宋史》，遂谓：“于是吕公着、韩维，王安石借以立声誉者也；欧阳修、文彦博，荐己者也；富弼、韩琦，用为侍从者也；司马光、范镇，交友之善者也：悉排斥不遗力。”慈圣、宣仁两太后也在宋神宗前哭说：「王安石乱天下。」而他也用人不善，阵脚不稳。终在1074年、1076年两次被罢免职务。熙宁七年(1074年)，由于旱灾不断，有很多饥民流离失所，神宗在上朝时对此有所感叹，建议要废除所有不利的法令。王安石奏对时认为现在需要关注的是人为之事，神宗回复说有很多人都因此多