Что определяет качество научного журнала?

РЕДАКЦИОННАЯ

ЧТО ОПРЕДЕЛЯЕТ КАЧЕСТВО НАУЧНОГО ЖУРНАЛА?

А.А. Кубанова, А.Э. Карамова*

Государственный научный центр дерматовенерологии и косметологии 107076, Москва, ул. Короленко, 3, стр. 6

От редакции

Вниманию читателей представляется статья, посвященная оценке качества научного периодического издания. Опубликованная в журнале дерматологического профиля**, статья представляет безусловный интерес для всех отраслей медицинской науки, так как содержит информацию об основных библиометрических показателях, применяемых в настоящее время.

Число научных журналов ежегодно возрастает. Появляются новые издания, как правило, специализированные и отражающие потребность научного сообщества в публикации исследований в определенной области знаний. Подобная тенденция четко прослеживается в биомедицинских журналах - появление новых узких специальностей стимулирует создание соответствующих профессиональных периодических изданий [1, 2]. Большое количество научных журналов, с одной стороны, призвано облегчить читателю поиск релевантной информации, необходимой для решения конкретной задачи, с другой - может затруднить выбор источника информации при наличии нескольких журналов, публикующих статьи по сходной тематике.

Оценка качества научной публикации, отдельно взятой статьи достаточно широко представлена в литературе [3, 4, 5]. Мы бы хотели остановиться на качестве научного медицинского журнала в целом. На какие особенности, признаки, характеристики журнала может ориентироваться: (1) читатель; (2) потенциальный автор при выборе издания для публикации; (3) организация при поиске журнала для опубликования значимых исследований и оценке публикационной активности своих сотрудников?

С точки зрения читателя выбор журнала определяется главным образом его содержанием - насколько интересна, достоверна и применима на практике публикуемая информация. Многие другие факторы также влияют на мнение читателя. Имеет значение год осно-

Сведения об авторах:

А.А. Кубанова — д.м.н, профессор, академик РАМН, директор ГНЦДК

А.Э Карамова — км.н, в.н.с. ГНЦДК

*Автор, ответственный за переписку (Corresponding author): arfenya@yandex.ru

**Повторная публикация (Вестникдерматологии и венерологии 2013;(4):16:22) с разрешения главного редактора журнала, президента Российского общества дерматовенерологов и косметологов, акад. РАМН, проф. А.А. Кубановой

вания журнала - выпускаемые десятилетиями и даже столетиями журналы пользуются большим признанием и авторитетом, чем издания возрастом в несколько лет или месяцев. Означает ли это, что новый журнал заведомо хуже выходящего много лет? Нет, не обязательно, но новый журнал должен стремиться к высокому уровню публикаций в связи с большим количеством конкурирующих изданий.

Другой параметр, интересующий читателя, - на каком языке публикуется журнал. Разумеется, для читателя из России издания на русском языке ближе и понятнее, но на сегодняшний день международный язык науки, в том числе медицины, - английский. Все ведущие медицинские журналы мира выпускаются на английском языке. Подавляющее большинство медицинских англоязычных журналов представлено в международной библиографической базе данных PubMed, и поиск необходимой читателю информации существенно облегчается. К сожалению, лишь небольшая часть российских медицинских журналов индексируется в PubMed.

Критически важным для читателя является доступ к полному тексту статьи, опубликованной в интересующем его журнале. В идеале читатель получает его через PubMed, перейдя по соответствующей ссылке. Все большее количество журналов следует политике open access, многие журналы открывают доступ по прошествии 1 2-24 мес после публикации. Доступ к полному тексту статьи читатель может получить и непосредственно на сайте журнала, что особенно актуально для большинства российских медицинских журналов, не представленных в PubMed. Оптимальный для читателя вариант - возможность скачать текст публикации в формате Adobe PDF, содержащий все необходимые выходные данные. К сожалению, многие сайты медицинских журналов обеспечивают доступ только к резюме статьей, и в некоторых случаях в резюме выходные данные представлены лишь частично - например, отсутствует диапазон страниц.

В течение последних лет (с 2005 г.) читатель может получить необходимую информацию с помощью Российского индекса научного цитирования (РИНЦ), библиографической базы данных российских публикаций [6]. В РИНЦ представлены практически все рецензируемые медицинские журналы, присутствует полное библиографическое описание статей, включая списки литературы, возможен доступ к полному тексту статей.

Для потенциального автора, планирующего публикацию, важны и другие характеристики журнала. Механизм подачи статьи (в печатном виде или в электронной форме), срок рассмотрения рукописи, время от принятия статьи к публикации до выхода печатной версии - все эти вопросы являются первостепенными для потенциального автора. Доля отклоняемых статей и тип рецензирования - открытое, членами редакционной коллегии, или двойной слепой метод - также являются ключевыми моментами при выборе издания для публикации. Все перечисленные характеристики должны быть четко представлены в инструкциях для авторов в печатной версии и на сайте журнала. И если для ведущих англоязычных медицинских журналов указание, например, доли принимаемых/отклоняемых статей - обычная практика, то для российских журналов подобный показатель - экзотика. В то же время доля отклоняемых на разных этапах статей (до рецензирования - из-за несоответствия профилю журнала, исходно низкого качества, после рецензирования - отрицательного мнения рецензентов) - важнейший показатель качества научного медицинского журнала. В качестве примера можно привести представленные на сайте журнала Sexually Transmitted Infections характеристики: доля принимаемых к печати статей - 35%; время с момента подачи статьи до первоначального решения - 39 дней; время с момента принятия статьи до публикации онлайн - 29 дней, в печатной версии - 89 дней [7]. Доля принимаемых к печати статей в одном из ведущих медицинских журналов мира, British Medical Journal, всего 7% [8].

Потенциального автора также интересует вопрос оплаты публикации. Подавляющее большинство зарубежных журналов, работающих по модели открытого доступа (Open Access), устанавливают авторский взнос за публикацию статьи (в том случае, если она принята к печати). Журналы, публикуемые крупными издательствами и работающие по традиционной модели, принимают статьи к публикации бесплатно (но для читателя доступ к статье платный).

В более сложной ситуации находятся организации. Выбор журнала для публикации работ сотрудников организации определяет лицо учреждения, его научную ценность и значимость и даже конкурентоспособность. В вопросе выбора издания пожелания авторов и его организации могут различаться. Автор стремится опуб-

ликовать свою работу в достаточно краткие сроки с минимальным риском возможности отказа в публикации, на русском языке. Организациям интересны прежде всего высокозначимые научные журналы, публикации в которых наиболее часто цитируются. Какими методами оценки качества научных журналов следует пользоваться в этом случае?

На сегодняшний день основной количественный показатель ценности научного журнала, в том числе медицинского, - Impact Factor (импакт-фактор, в дословном переводе - фактор влияния). Журналы с высоким импакт-фактором (ИФ) - наиболее авторитетные издания, в медицинских журналах с высоким ИФ публикуются результаты исследований, меняющих повседневную врачебную практику.

ИФ рассчитывается для журналов, индексируемых в международной библиографической базе данных и системе цитирования Web of Science (точнее, в разделе Journal Citation Report) и показывает, сколько раз в среднем цитируется каждая опубликованная в журнале статья в течение двух последующих лет после выхода [9].

Создатель ИФ, один из основателей Института научной информации (ISI) Eugene Garfield, в 2005 г. дал следующее описание ИФ: «Импакт-фактор журнала основан на двух элементах: числителе, представляющем собой количество цитирований в течение текущего года статей, опубликованных в журнале в предшествующие два года, и знаменателе, количестве научных статей, опубликованных в течение тех же двух лет» [10]. Необходимо отметить, что к цитированиям относят не все типы статей, а только оригинальные исследования и обзоры.

Журналы с ИФ больше 2 считаются достаточно значимыми и весомыми. Ведущие медицинские журналы имеют высокие значения ИФ; так, уже упоминавшийся журнал Sexually Transmitted Infections имеет ИФ 2,611, общемедицинский British Medical Journal -17,215.

Российские медицинские журналы, индексируемые в Web of Science и выходящие на русском языке, имеют относительно низкие значения ИФ. Например, для журнала «Терапевтический архив» этот показатель равен 0,153. Для российских журналов, имеющих параллельную англоязычную версию, ИФ выше - журнал «Биохимия/Biochemistry (Moscow)» имеет ИФ 1,058. Важно отметить, что ИФ меняется от года к году в соответствии с нарастанием или уменьшением числа цитирований.

Расчет ИФ имеет ряд ограничений и недостатков. В частности, число цитирований не связано напрямую с качеством проведенных исследований; в разных областях знаний различается как частота публикаций, так и частота цитирований; считается, что применяемый

Title SJR H index Total Docs. (2011) Total Docs. (3years) Total Refs. Total Cites (3years) Citable Docs. (3years) Cites / Doc. (2years) Ref. / Doc.

1 Water Resources 0,203 8 93 227 2.171 40 226 0,14 23,34

2 Applied Biochemistry and Microbiology 0,177 17 124 344 3.490 128 342 0,34 28,15

3 Tsitologiya 0,150 12 113 353 4.035 114 353 0,30 35,71

4 Sovremennye Tehnologii v Medicine 0,138 2 148 140 2.122 4 137 0,03 14,34

5 Fiziologiia cheloveka 0,133 10 103 309 0 66 309 0,22 0,00

Izvestiia Akademii nauk. Seriia

6 biologicheskaia / Rossiiskaia akademiia nauk 0,122 8 85 258 0 45 257 0,12 0,00

7 Ontogenez 0,121 8 48 125 0 28 125 0,19 0,00

8 Studies on Russian Economic Development 0,118 3 66 212 867 7 208 0,03 13,14

9 Georgian medical news 0,115 8 187 571 0 91 571 0,14 0,00

10 Molekuliarnaia genetika, mikrobiologiia i 0,113 7 15 81 0 14 81 0,17 0,00

Country

virusologiia

Рис. 1. Показатели SJR 2011 российских журналов в рубрике Medicine

Title

Journal of Investigative

SJR

H

index

Щ 2,236 126

Dermatology 2 British Journal of Dermatology 1,595 111 Pigment Cell and Melanoma Research

Journal of the American Academy of Dermatology 5 Sexually Transmitted Diseases SD 1,372 71

Wound Repair and Regeneration 7 Experimental Dermatology Seminars in Cutaneous Medicine and Surgery Skin Pharmacology and Physiology Journal of the European 10 Academy of Dermatology and 1,080 51

Venereology

3

4

6

8

9

1,527 63

1,378 131

1,315 61

1,292 59

1,256 38

1,084 48

Total Docs. (2011) Total Docs. (3years) Total Refs. Total Cites (3years) Citable Docs. (3years) Cites / Doc. (2years) Ref. / Doc. Country

402 1.281 11.632 5.348 840 6,47 28,94 l^|K> сДЗ

508 1.637 13.172 4.981 1.082 4,22 25,93 СІЧ

145 338 5.441 941 251 3,55 37,52 i^lKI

639 1.368 13.228 4.069 1.105 3,46 20,70 «g

224 542 5.996 1.473 471 2,99 26,77 Ш

98 292 3.507 1.088 272 3,12 35,79

216 515 8.001 1.727 406 4,28 37,04 Ь-ZIQ сДЗ

49 142 1.787 438 119 3,51 36,47

45 147 1.686 497 131 3,31 37,47

342 1.339 8.951 2.124 564 3,71 26,17

Рис. 2. Показатели SJR 2011 журналов по специальности Dermatology в рубрике Medicine

ТІюїт^оп Reuters двухлетний интервал недостаточен для точной оценки цитирований [11].

В то же время ИФ настолько важен для журналов в конкурентной борьбе, что издательствами и редакциями применяются не всегда честные методы повышения ИФ. Так, 19 июня 2013 г. из опубликованного Thoтson Reuters обновленного списка ИФ журналов [12] исключены 66 из-за чрезмерного самоцитирования или договоренностей между журналами о масштабном взаимном цитировании [13].

Недостатки, присущие ИФ, привели к появлению альтернативных индексов оценки качества журнала. Один из новых, но уже применяющихся de facto в системе цитирования Scopus компании Elsevier, является SJR -SCImago Journal Ranking. Данный индекс был разработан

B. Gonzalez-Pereira и соавт. из исследовательской группы SCImago [14], он основан на информационно-аналитической базе данных Scopus, рассчитывается за трехлетний период и учитывает авторитетность цитирований. «Вес» цитирования в престижном журнале,

Таблица Библиометрические показатели российских дерматологических журналов

Название журнала Двухлетний ИФ РИНЦ Пятилетний ИФ РИНЦ Место в рейтинге по медицине

Современные проблемы дерматовенерологии, иммунологии и врачебной косметологии 0,110 0,095 267

Экспериментальная и клиническая дерматокосметология 0,132 0,118 217

Клиническая дерматология и венерология нет 0,270 50

Российский журнал кожных и венерических болезней 0,269 0,218 68

Вестник дерматологии и венерологии 0,520 0,484 28

Рис. 3. Общие показатели публикационной активности журнала «Вестник дерматологии и венерологии»

Рис. 4. Двухлетний ИФ журнала «Вестник дерматологии и венерологии»

таком как Nature или Science, будет выше, чем в журнале, мало цитируемом в Scopus [15]. Немаловажно, что SJR исключает самоцитирования при соответствующем коэффициенте более 33% [15].

К преимуществам SJR следует отнести более широкий, в сравнении с Web of Science, охват журналов в Scopus, а также лучший учет цитирований статей, опубликованных не на английском языке [16, 17]. Кроме того,

значения SJR представлены не только в Scopus, но и на сайте SJR в открытом доступе [18].

К сожалению, SJR 2011 г. (данные за 2012 и 2013 гг пока не рассчитаны) в рубрике Medicine отображается только для 39 российских журналов, причем возглавляет этот список журнал Water Resourses (SJR 0,203) - англоязычная версия журнала «Водные ресурсы», имеющего косвенное отношение к медицине (рис. 1) [19].

Для специальности Dermatology в разделе Medicine представлены 103 журнала, возглавляют список дерматологические журналы, выпускающиеся в США и Великобритании (рис. 2) [20]. Ни одного российского журнала в этом списке нет.

Существуют и другие новые индексы, подобные ИФ - SNIP [21], вместе с SJR рассчитываются в Scopus, Eigen-factor score [22], однако они предложены относительно недавно.

ИФ для российских журналов, не представленных в Web of Science и Scopus, рассчитывает РИНЦ. На сегодняшний день в РИНЦ представлена информация о более чем 4,7 млн публикаций в более чем 4000 журналов. РИНЦ предоставляет свободный доступ ко всем показателям журнала (в отличие от Web of Science и Scopus, доступных только по подписке).

В качестве примера приведем общие показатели журнала «Вестник дерматологии и венерологии», представленные на странице «Анализ публикационной активности журнала» (рис. 3) [23].

В РИНЦ рассчитывается традиционный двухлетний ИФ, а также пятилетний ИФ, лишенный некоторых

Литература

1. Fraser A.G., Dunstan F.D. On the impossibility of being expert. BMJ. 2010;341 :c6815.

2. Smith R. Strategies for coping with information overload. BMJ. 2010;341 :c7126.

3. Vlasov V.V. Vvedenie v dokazatel'nuju medicinu. M.: MediaSfera, 2001. [Власов В.В. Введение в доказательную медицину. М.: МедиаСфера, 2001].

4. Greanhalght T How to read a paper. The basics of evidence-based medicine. 4th Ed. Blackwell Publishing, 2006. [Гринхальх Т Основы доказательной медицины. Пер. с англ. М., ГЭОТАР-Медиа, 2009]

5. How to read a paper http://www.bmj.com/aboutbmj/ resources-readers/publications/how-readpaper

6. Российский индекс научного цитирования http://elibrary.ru/project_risc.asp

7. Sexually Transmitted Infections - About http://sti.bmj.com/site/about/

8. BMJ Resources for authors http://www.bmj.com/about-bmj/resources-authors

9. The Thomson Reuters Impact Factor http://wokinfo.com/essays/impact-factor/

10. Garfield E. The agony and the ecstasy: the history and meaning of the Journal Impact Factor http: //garfield. library.upenn.edu/papers/jifchicago2005.pdf

11. Falagas M.E., Kouranos VD., Arencibia-Jorge R., Karageorgopoulos DE.Comparison of SCImago journal rank indicator with journal impact factor FASEB J. 2008;22(8):2623-8.

12. Thomson Reuters Research Analytics Unveils 2013 Release of Its Journal Citation Reports http://thom-sonreuters.com/pressreleases/062013/201 3-journal-citation-reports

13. New record: 66 journals banned for boosting impact factor with self-citations http://blogs.nature. com/news/2013/06/new-record-66-journalsbanned-for-boosting-impact-factor-with-self-cita-tions.html

недостатков традиционного показателя. В таблице представлены двухлетние и пятилетние ИФ РИНЦ, а также место в рейтинге SCIENCE INDEX в разделе «Медицина» для российских медицинских журналов в области дерматологии.

Анализ показателей публикационной активности по годам позволяет увидеть, как меняется ИФ журнала. В качестве примера представлен ИФ журнала «Вестник дерматологии и венерологии» с 2008 по 2011 г. (рис. 4) [23].

РИНЦ предоставляет объективную информацию о результативности и эффективности деятельности научноисследовательских организаций, исследователей, научных журналов России. Но для интеграции журнала в международное научное пространство необходимо его включение в системы цитирования Web of Science и Scopus. В этом случае у журнала появятся ИФ Thomson Reuters, новые показатели SJR и SNIP, а публикуемые статьи, их авторы и организации, в которых проводятся исследования, станут известны мировому научному сообществу.

14. Gonzaalez-Perei ra B., Guerrero-Bote VP, Moya-Anegoon F. A new approach to the metric of journals scientific prestige: The SJR indicator. Journal of Informetrics 2010;(3):379-91.

15. Gonzaalez-Perei ra B., Guerrero-Bote VP, Moya-Anegoon F. The SJR indicator: A new indicator of journals' scientific prestige: http://arxiv.org/ftp/arxiv/papers/0912/0912.4141 .pdf

16. Ramin S., Sarraf Shirazi A. Comparison between Impact factor, SCImago journal rank indicator and Eigenfactor score of nuclear medicine journals. Nucl Med Rev Cent East Eur. 2012;15(2):132-6.

17. Siebelt M., Siebelt T, Pilot P, Bloem R.M., Bhandari M., Poolman R.W Citation analysis of orthopaedic literature; 18 major orthopaedic journals compared for Impact Factor and SCImago. BMC Musculoskelet Disord. 2010;11:4.

18. SJR; Scientific Journal Ranking http://www.scimagojr.com/journalrank.php

19. http://www. scimagojr.com/journalrank.php?a rea=2 700 &category=0 &country= R U &yea r=2011 &o rd -er=sjr&min=0&min_type=cd

20. http://www. scimagojr.com/journalrank.ph p?area=2700 &category=2708&cou ntry=a 11&yea r=2011 & order=sjr&min=0&min_type=cd

21. Moed H.F. Measuring contextual citation impact of scientific journals. Journal of Informetrics 201 0;4(3): 265-277.

22. Bergstrom C.T, West J.D., Wiseman M.A. The Eigenfactor metrics.J Neurosci. 2008;28(45): 1 1433-4.

23. http://elibrary.ru/title_profile.asp?id=7685

Поступила: 18.11.2013 Принята в печать: 29.1 1.201 3