インパクトファクター
この決定に続き、全米科学財団(米国)と研究評価事業(英国)でも同様の決定がなされている。
科学的成果と科学者自身を評価する際のジャーナルインパクトファクターの不適切な使用に対する懸念の高まりに応えて、米国細胞生物学会は、学術ジャーナルの編集者と発行者のグループとともに、研究評価に関するサンフランシスコ宣言(DORA)を作成した。2013年5月にリリースされたこのDORAは、数千の個人や数百の機関からの支援を獲得しており、その中には2015年3月に支持を表明したヨーロッパ研究大学連盟(League of European Research Universities; LERU)が含まれている。
英国高等教育助成評議会は、庶民院科学技術選択委員会に対して、研究評価事業委員会に、論文発表をしたジャーナルで研究成果の質を評価している疑念を指摘し、ジャーナルではなく各記事の内容の質を評価する義務があることを再考するよう、要請を出した。
いくつかの出版社やプラットフォームでは、インパクトファクターを表示しないことを選択している。たとえば、出版社のPLOSは、ジャーナルのインパクトファクターをWebサイトに表示していない。インパクトファクターは、学術的な検索エンジンであるMicrosoft Academicにも表示されない。2020年の時点で、Microsoft社のチームは、FAQのページで、h指数やEI / SCI、およびジャーナルのインパクトファクターは示されていない、と述べている。
クラリベイト社によるインパクトファクターの正確な計算方法は、一般的に公開されておらず、結果は予測も再現もできない。特に「引用可能」と見なされ分母に含まれる項目によって、結果が大幅に変わる可能性がある。この悪名高い例の1つは、1988年にFASEB Journalにおいて、掲載された会議要旨(meeting abstracts)が分母に含まれなくなったことである。この変更の結果、ジャーナルのインパクトファクターは1988年の0.24から1989年の18.3へと跳ね上がった。このように出版社は、ジャーナルのインパクトファクターの「精度」を向上させてより高いスコアを取得する方法について、Clarivateと定期的に話し合っていると言われている。このような交渉によって、例えば5大出版社の1つによる買収といった、雑誌内容や科学とは無関係なイベントの後に、数十のジャーナルのIFスコアが劇的に変化する、というような現象が実際に観察されている。
インパクトファクターの使用に関しては、多くの批判がなされてきた。2007年の調査では、最も根本的な欠陥は、インパクトファクターが正規分布にならないデータの平均を示していることであり、これらのデータの中央値を示すことがより適切であることが示唆された。ジャーナルの重要性の尺度としてのインパクトファクターの有効性と、編集者がインパクトファクターを高めるために採用する可能性のあるポリシーの効果(すなわち、論文執筆者と論文読者の不利益)についても、より一般的な議論がある。他の批判は、学者、編集者、その他の利害関係者の行動に対するインパクトファクターの影響に焦点を当てている。また、より一般的な批判としては、インパクトファクターの強調は新自由主義政策の学界への悪影響から生じていると主張し、単純にインパクトファクターを科学出版物のより洗練された測定基準に置き換えるだけでなく、研究評価と高等教育における科学的キャリアの不安定さの高まりに関して議論を深めることが必要である、という主張がある。
現在、研究者や大学教員の人生および生計維持において、発表した論文のインパクトファクターの数字が決定的かつ絶対的な意味を持つケースは数多くある。例えば2016年に行われた東京女子医科大学の消化器外科講座の教授公募では、2015年に出版した論文のインパクトファクターの合計が15以上であることが公募要件として明記されている。2011年に行われた福井大学の助教の公募では、採用後にインパクトファクターが約10以上の雑誌に論文を出す等の条件を満たせなければ雇用を4年で打ち切ることが明記されている。一方、このような人事評価への利用についての批判も存在する。教授選考の指標として適切かどうかが問題となったこともある。さらに計算対象についても、直近2年の論文データしか用いないのは短すぎるとの批判がある。インパクトファクターを重視しすぎるあまり、重要な研究成果についてはより高いインパクトファクターを求めて国外の著名な論文誌に投稿する研究者もおり、結果的にその国の論文誌には重要な成果は掲載されないことになるため、その国の論文雑誌を衰退させる可能性があるという指摘もある。
2015年11月30日に、秋篠宮文仁親王は、50歳の誕生日に際して行われた記者とのやり取りにおいて、インパクトファクターに関して次のように述べた。
2016年のノーベル賞受賞者である大隅良典は、論文不正問題の原因としてインパクトファクターを取り上げたNHKスペシャル『追跡 東大研究不正~ゆらぐ科学立国ニッポン~(2017年12月10日)』のインタビューで次のように述べた。