Вестник РАН, 2020, T. 90, № 4, стр. 364-380

ОЦЕНКА ЖУРНАЛОВ RSCI ПО ЭКОНОМИЧЕСКИМ НАУКАМ В КОНТЕКСТЕ СОЗДАНИЯ НАЦИОНАЛЬНОГО ИНДЕКСА ЦИТИРОВАНИЯ

О. В. Третьякова *

Вологодский научный центр РАН
Вологда, Россия

* E-mail: olga.tretyackova@yandex.ru

Поступила в редакцию 15.08.2019
После доработки 22.10.2019
Принята к публикации 10.01.2020

Полный текст (PDF)

Аннотация

Создание национальной наукометрической базы данных научной периодики в России может решить проблему выделения ведущих научных журналов. Первым шагом на пути к её формированию стала разработка индекса цитирования Russian Science Citation Index (RSCI). Чтобы прояснить, устранены ли противоречия первой его версии, вышедшей в 2015 году, в статье дан анализ количественных показателей, в том числе библиометрических, 28 экономических журналов, включённых в 2018 г. во вторую версию Russian Science Citation Index (RSCI-2018). Полученные данные сопоставлены с результатами общественной экспертизы. Для полноты охвата перечня журналов проанализированы количественные и качественные показатели нескольких изданий, не введённых в RSCI-2018. Показано, что недостатки предыдущей версии перечня не устранены. Сделан вывод о неполноте списка, непрозрачности и несоблюдении некоторых критериев при его составлении, а также о недостаточности параметров, которые используются для отбора изданий. Результаты исследования, позволяющие оценить потенциал RSCI для создания национальной наукометрической базы данных научной периодики, ставят вопрос о необходимости консолидации усилий научного и экспертного сообщества для установления прозрачных процедур отбора журналов. Полученные данные могут учитываться официальными структурами при оценке эффективности деятельности научных организаций и способствовать повышению уровня периодических изданий.

Ключевые слова: национальный индекс цитирования, наукометрическая база данных, научная периодика, экономический журнал, библиометрический показатель, общественная экспертиза журналов, Российский индекс научного цитирования (РИНЦ), Russian Science Citation Index, список RSCI-2018, Web of Science.

Сегодня в России издаётся более тысячи журналов по экономике и их число ежегодно увеличивается. В этих условиях дискуссия о выборе ведущих изданий не только не теряет актуальности, но и усиливается под воздействием различных факторов, в том числе связанных с оценкой эффективности деятельности научных организаций. Полемика о необходимости публиковать результаты исследований прежде всего в высокорейтинговых журналах обострилась с запуском в 2018 г. национального проекта “Наука”, когда перед научными коллективами были поставлены амбициозные задачи по кратному увеличению публикаций, индексируемых в базе данных Web of Science Core Collection (WoS) или в альтернативной Scopus, и расширению перечня индексируемых в них российских журналов [1].

За последние несколько лет количество отечественных экономических журналов, включённых в международные наукометрические базы, выросло. На сегодняшний день их доля в WoS составляет около 1.4% от общего числа экономической периодики. Расширение перечня изданий с международной сертификацией стало возможным благодаря появлению в 2015 г. нового индекса Emerging Sources Citation Index (ESCI) в составе WoS. И хотя рост журнальной продукции в международных базах данных свидетельствует об улучшении “видимости” российских исследователей в глобальной науке, эксперты всё чаще сходятся во мнении, что необходимо создавать свою национальную реферативно-библиографическую базу. Президент Ассоциации научных редакторов и издателей (АНРИ) О.В. Кириллова считает, что включение в международные наукометрические базы данных должно стать “естественным достижением наиболее качественных журналов, которые будут иметь высокие показатели и авторитет в международном сообществе”, но при этом следует формировать “пул качественных журналов национального и международного уровней, поддерживаемых и развиваемых внутри страны” [2]. В России есть все предпосылки для создания собственной национальной базы научной периодики, но, к сожалению, пока они не использованы в полной мере.

Разработка российского индекса научного цитирования не переросла в создание национальной базы данных, которая аккумулировала бы все издаваемые в стране качественные научные журналы, поскольку РИНЦ начал индексировать их без применения к периодике жёстких критериев отбора. Это привело к тому, что в базе оказались разные по качеству и уровню научного влияния журналы, в том числе те, которые используют неэтичные издательские практики. И хотя РИНЦ предлагает набор инструментов для сбора библиометрических данных по каждому изданию, их применение затруднено по причине качественных различий журналов, а также наличия в системе изданий с показателями, полученными в результате манипулирования цитированием и принятия других неэтичных решений.

В 2015 г. была предпринята попытка выделить наиболее значимые российские издания по всем направлениям исследований. Но процедура отбора журналов, которые вошли в базу Russian Science Citation Index (RSCI), размещённую на платформе Web of Science, получила в экспертной среде неоднозначные оценки [3], что помешало RSCI претендовать на статус национального индекса.

В 2018 г. вышла вторая редакция списка RSCI. В совокупности с российскими журналами, индексируемыми в WoS и Scopus, издания из перечня RSCI-2018 попали в информационно-аналитическую систему “Ядро РИНЦ”. Её показатели (число публикаций и совокупная цитируемость организации) стали официально учитываться в мониторинге результативности научных институтов и центров [4]. В этом контексте очевидным становится значение, которое в одночасье приобрела база данных RSCI. С учётом официального статуса, полученного показателями по ядру РИНЦ, включающему базу данных RSCI, можно говорить о том, что на сегодняшний день Russian Science Citation Index претендует на роль национального наукометрического индекса. В связи с этим остро встают вопросы определения критериев отбора журналов для включения в пул самых лучших и качественных российских изданий, а проблема создания в России национальной наукометрической базы данных научной периодики набирает новый виток.

В 2016 г. мы опубликовали результаты исследования экономических журналов, включённых в RSCI, на предмет его полноты и объективности критериев отбора, где были отмечены слабые места процедуры формирования перечня и сделан вывод о необходимости её совершенствования [5]. С целю выяснить, устранены ли противоречия, содержащиеся в первой редакции списка RSCI, комплексному анализу подверглись экономические журналы, попавшие в новый перечень в 2018 г. Для этого были изучены количественные показатели, в том числе библиометрические, 28 экономических журналов из списка RSCI-2018. Полученные данные сопоставлены с результатами общественной экспертизы, дана оценка журналов на предмет соответствия международным стандартам качества. Чтобы понять полноту охвата перечня, проанализированы также количественные и качественные показатели нескольких журналов, не включённых в RSCI-2018. Результаты исследования позволяют подойти к вопросу об оценке потенциала Russian Science Citation Index для создания национальной наукометрической базы данных научной периодики.

ПРЕДПОСЫЛКИ ФОРМИРОВАНИЯ НАЦИОНАЛЬНЫХ ИНДЕКСОВ НАУЧНОГО ЦИТИРОВАНИЯ: МЕЖДУНАРОДНЫЙ ОПЫТ

Международная практика показала, что эффективное развитие национальных наукометрических систем способствует повышению уровня научных изданий внутри страны и позволяет объективно оценивать результативность научных коллективов.

Созданный в середине ХХ в. американским учёным Ю. Гарфилдом указатель цитирования научной литературы внёс значительный вклад в развитие мировой науки [6]. Расширение географии индекса породило проблему неравномерной представленности в нём отдельных стран. По мнению экспертов, дисбаланс, сложившийся в региональном распределении исходных журналов, включённых в глобальный индекс цитирования, с одной стороны, обусловлен различным уровнем развития науки в разных странах, с другой – не даёт возможность получить объективную оценку качества научной деятельности учёных, представляющих эти страны [7, 8]. Нерепрезентативность некоторых национальных изданий в базах ISI (The International Statistical Institute) стала главной причиной появления локальных индексов, собирающих сведения о цитировании в рамках одной страны или географического региона [9].

Государства, где уже созданы национальные индексы – Chinese Science Citation Database (CSCD) [7] и China Scientific and Technical Papers and Citations (CSTPC) [10] в Китае, Citation Database for Japanese Papers (CJP) в Японии [11], Brazil’s National Database of Research and Science Resumes (BNDRSR) в Бразилии, – сегодня добились больших успехов в демонстрации научных достижений. По оценкам экспертов, разработка собственных индексов цитирования позволила значительно улучшить международную “видимость” национальных исследований и повысить эффективность оценки развития науки в стране [7].

В России вопрос о создании национального индекса цитирования, который мог бы стать альтернативой зарубежным базам данных, тоже стоит на повестке дня [12]. Предприняты попытки разработать национальный индекс цитирования. Так, Научная электронная библиотека (НЭБ) eLIBRARY.RU совместно с Российской академией наук реализовала проект Russian Science Citation Index на платформе Web of Science. Первая версия RSCI, появившаяся в 2015 г., представляла собой перечень из 653 изданий, позиционировавшихся разработчиками как пул лучших российских научных журналов. Между тем исследователи установили, что попавшая в список периодика неравномерно и недостаточно объективно представлена с позиций библиометрических показателей и распределения по тематическим рубрикам. Непрозрачные алгоритмы формирования, по мнению экспертов, создали “предпосылки для ошибочного понимания роли базы данных для отечественной науки” и, следовательно, невозможности её использования для принятия эффективных государственных решений в области науки [3]. Кроме того, как отмечают эксперты, научный уровень RSCI-2015 оказался недостаточно высоким, поэтому публикации в журналах списка не получили того же статуса, что и статьи в периодике, включённой в Web of Science, для отчётности по государственным заданиям и грантам [13].

В 2018 г. вышла вторая версия Russian Science Citation Index (RSCI-2018). В перечень, по данным РИНЦ на конец декабря 2018 г., вошли 777 научных журналов. В работе проанализирована только часть списка, включающая экономические журналы, чтобы, с одной стороны, оценить их уровень и степень соответствия международным стандартам, а с другой – полноту охвата перечня и объективность отбора.

РЕЗУЛЬТАТЫ АНАЛИЗА ЭКОНОМИЧЕСКИХ ЖУРНАЛОВ, ВКЛЮЧЁННЫХ В RSCI-2018

Распределение журналов RSCI-2018 по тематике. На рис. 1 показано распределение изданий по предметным рубрикам Государственного рубрикатора научно-технической информации (ГРНТИ). Диаграмма отражает сведения о сгруппированных по предметным областям журналах, доля которых в общем числе изданий, включённых в RSCI-2018, превышает 1%. При этом 13% приходится на тематические рубрики, представленные меньшим количеством журналов (доля не более 1%).

Рис. 1.

Распределение журналов RSCI-2018 по предметным рубрикам

Источник: построено автором по данным НЭБ на сентябрь 2018 г.

Данные, обобщённые в диаграмме, свидетельствуют, что в списке RSCI-2018 в большом количестве представлены издания по медицинской тематике, их доля составляет почти 15%. В предыдущей редакции RSCI также преобладали журналы в области медицины и здравоохранения, что, по мнению экспертов, нехарактерно для российских публикаций в Web of Science или Scopus, где медицина занимает далеко не лидирующую позицию [14]. Согласно статистическим данным, полученным из системы WoS, в 2018 г. больше всего статей, имеющих аффиляции с организациями из России, приходилось на точные и естественные науки: прикладную физику (более 6 тыс. ед.), материаловедение (более 5 тыс.), оптику (более 4 тыс.), электронную инженерию (более 4 тыс.), физику (междисципл., 3.5 тыс.), химию (междисципл., около 3 тыс.), математику (более 2.5 тыс.). Журналы естественнонаучного профиля занимают значительное место и в базе данных RSCI-2018: биология – 8.3% от общего числа; математика – 6.4%; физика – 5.9%; химия – 5.1%. В списке достаточно много журналов по сельскому и лесному хозяйству, их доля составляет почти 5% от общего числа изданий. По отдельным общественным и гуманитарным дисциплинам цифры существенно меньше: история – 3.3%, языкознание – 1.7%, политические науки – 1.6%, социология – 1.6%, философия – 1.2%. Что касается экономических изданий, то их доля менее 3% (28 ед.).

Таким образом, с точки зрения распределения периодики по тематическим рубрикам перечень RSCI-2018 неравномерен. В списке заметно превалируют издания по медицинским, естественным и точным наукам, в то время как журналы общественного и гуманитарного профиля представлены слабо. Это, с одной стороны, отражает их положение в современной структуре науки, с другой – демонстрирует тот факт, что научные коллективы, ведущие исследования в области общественных и гуманитарных наук, оказались в неравных условиях с организациями других профилей. В итоге формируются неблагоприятные условия для развития исследований, результаты которых неразрывно связаны с процессами социально-экономической модернизации общества и направлены на создание точек роста экономики и повышение качества жизни граждан – ключевых факторов суверенитета и безопасности государства.

Общая характеристика экономических журналов, включённых в RSCI-2018. Экономические журналы из списка оценивались по соответствию требованиям, предъявляемым к изданиям, согласно принятому Регламенту RSCI [15], а также международным стандартам, поскольку данные RSCI размещаются в интерфейсе WoS. Одновременно анализировались полнота охвата перечня, количественные и качественные показатели нескольких журналов, не вошедших в список.

В таблице 1, где представлен полный перечень журналов, индексируемых в РИНЦ по тематике “Экономика. Экономические науки” и отобранных в RSCI-2018, обобщены выходные сведения об изданиях, информация об их индексации в международных наукометрических базах, изучены показатели, полученные в ходе библиометрического анализа и общественной экспертизы, в которой принимали участие более 40 тыс. высокоцитируемых в РИНЦ учёных. Итоговый список включает 28 наименований изданий, ранжированных по значению интегрального показателя и месту в рейтинге Science Index-2017.

Таблица 1.

Сведения о журналах, индексируемых в РИНЦ по тематике “Экономические науки” и включённых в список RSCI-2018

Журнал Учредитель/издатель Город  Отметка о включении  в Перечень ВАК, ГИЦ  Интегральный показатель  Science Index-2017  Место в рейтинге Science Index-2017    по тематике “Экономика”/  в общем рейтинге  (квартиль)  Средняя оценка  по результатам  общественной экспертизы  Место в рейтинге по  результатам общественной  экспертизы по тематике  “Экономика” /в общем рейтинге
Вопросы экономики НП «Редакция журнала “Вопросы экономики”» Москва ВАК
WoS
Scopus
17.373 1/4(1) 3.595 1/60
Форсайт НИУ “Высшая школа экономики” Москва ВАК
WoS
Scopus
8.634 3/13(1) 3.155 16/361
Проблемы прогнозирования/Studies on Russian Economic Development Институт народнохозяйственного прогнозирования РАН Москва ВАК
Scopus
4.137 6/57(1) 3.542 2/79
Journal of Institutional Studies (Журнал институциональных исследований) ООО “Гуманитарные перспективы” Ростов-на-Дону ВАК
WoS
4.502 5/43(1) 2.661 77/1146
Вестник Санкт-Петербургского университета. Серия 8: Менеджмент Санкт-Петербургский государственный университет. Высшая школа менеджмента Санкт-Петербург ВАК 2.789 11/115(1) 3.096 22/421
Мировая экономика и международные отношения РАН. Институт мировой экономики и международных отношений РАН Москва ВАК
WoS
Scopus
2.754 12/118(1) 3.541 3/80
Экономическая политика Российская академия народного хозяйства и государственной службы при Президенте РФ; Институт экономической политики им. Е.Т. Гайдара Москва ВАК
WoS
Scopus
2.731 13/122(1) 2.771 61/911
Экономический журнал Высшей школы экономики НИУ “Высшая школа экономики” Москва ВАК 2.696 15/126(1) 3.177 13/346
Российский журнал менеджмента Санкт-Петербургский государственный университет. Высшая школа менеджмента Санкт-Петербург ВАК 2.532 17/143(1) 3.183 12/339
Деньги и кредит Центральный банк Российской Федерации Москва ВАК 2.402 19/159(1) 3.123 20/394
Вестник международных организаций: образование, наука, новая экономика НИУ “Высшая школа экономики” Москва ВАК
WoS
Scopus
1.829 25/229(1) 2.765 63/924
Вестник Санкт-Петербургского университета. Экономика Санкт-Петербургский государственный университет Санкт-Петербург ВАК
WoS
1.666 32/269(1) 3.189 11/330
Регион: экономика и социология СО РАН; Институт экономики и организации промышленного производства СО РАН Новосибирск ВАК
Scopus (в  составе переводной версии)
1.587 38/293(1) 3.135 18/381
ЭКО Институт экономики и организации промышленного производства СО РАН Новосибирск ВАК 1.406 45/350(1) 3.127 19/389
Экономическая наука современной России Центральный экономико-математический институт РАН Москва ВАК 1.387 47/359(1) 3.039 25/507
Контуры глобальных трансформаций: политика, экономика, право Ассоциация независимых экспертов “Центр изучения кризисного общества” Москва ВАК 1.357 49/377(1) 2.125 249/2569
Вестник Московского университета: Серия 6: Экономика Московский государственный университет им. М.В. Ломоносова Москва ВАК 1.309 53/395(1) 3.246 8/276
Бизнес-информатика НИУ “Высшая школа экономики” Москва ВАК
Wos
1.264 56/409(1) 2.536 109/1433
Журнал Новой экономической ассоциации АНО “Журнал Новой экономической ассоциации” Москва ВАК
WoS
Scopus
1.233 61/424(1) 3.257 6/265
Проблемы управления Институт проблем управления им. В.А. Трапезникова РАН Москва ВАК 1.181 62/449(1) 2.410 141/1779
Прикладная эконометрика Московский финансово-промышленный университет “Синергия” Москва ВАК 1.154 64/463(1) 2.425 135/1738
Журнал экономической теории Институт экономики УрО РАН Екатеринбург ВАК 0.933 76/586(1) 3.020 29/538
Экономика и математические методы РАН Москва ВАК 0.918 78/604(1) 3.149 17/366
Корпоративные финансы НИУ “Высшая школа экономики” Москва ВАК 0.728 90/797(1) 2.802 56/851
Университетское управление: практика и анализ НП «Журнал “Университетское управление: практика и анализ”» Екатеринбург ВАК 0.549 110/1073
(2)
2.776 59/900
Финансы и бизнес Издательство “Проспект” Москва ВАК 0.196 206/2108
(3)
2.420 138/1754
Прикладная информатика Московский финансово-промышленный университет “Синергия” Москва ВАК 0.142 234/2396
(3)
2.261 196/2185
Russian Journal of Economics НП «Редакция журнала “Вопросы экономики”» Москва          

Источник: построено автором по данным НЭБ на 25 сентября 2018 г.

Практически все экономические журналы из списка RSCI-2018 (за исключением одного) входят в Перечень рецензируемых научных изданий (ВАК), в которых должны быть опубликованы основные научные результаты диссертаций на соискание учёной степени кандидата и доктора наук. Сравнение RSCI-2018 с перечнями российских экономических журналов, размещённых в международных наукометрических базах данных Web of Science и Scopus, выявило некоторые пересечения. По данным на сентябрь 2018 г., 9 изданий индексируются в WoS (Emerging Sources Citation Index) и 8 – в Scopus, из них 6 включены в обе базы (рис. 2). Тем не менее не все издания, охваченные WoS и Scopus, включены в RSCI-2018, хотя их вхождение в глобальные индексы цитирования свидетельствует о соответствии качества публикаций мировому уровню. Так, за пределами RSCI-2018 остались экономические журналы “Terra Economicus”, “Economic and Social Changes: Facts, Trends, Forecast”, “Journal of Tax Reform”, “Regional Research of Russia”, “Управленец”, “Экономика региона” и “Современная Европа”, отражённые в международных наукометрических базах данных.

Рис. 2.

Сводные данные о включении экономических журналов списка RSCI-2018 в Перечень ВАК и об их индексации в международных наукометрических базах данных

Источник: построено автором по данным МНБД, НЭБ на сентябрь 2018 г.

В предыдущей редакции RSCI-2015 наблюдалась сходная ситуация. Эксперты указывали на необходимость включения в новый перечень либо всех отечественных журналов, индексируемых в WoS, поскольку отбор туда осуществляется по наиболее строгим критериям, либо только тех изданий, которые не вошли в международную базу [3, с. 325]. Но рекомендации не были учтены, и в версии RSCI-2018 данная проблема осталась нерешённой. По нашему мнению, если список позиционируется в качестве значимого содержательного компонента информационно-аналитической системы “Ядро РИНЦ”, то в него определённо должны входить все журналы, индексируемые в Web of Science и Scopus, как наиболее влиятельные в своих научных направлениях и соответствующие высоким стандартам качества научного контента.

Оценка журналов по библиометрическим параметрам. Согласно Регламенту библиографической базы данных RSCI, для принятия решения о включении в неё того или иного издания учитываются показатели формального библиометрического анализа и результаты общественной экспертизы российских журналов. При этом в количественном анализе используется расширенный набор инструментов – до 50 библиометрических показателей, что даёт возможность провести корректное междисциплинарное сравнение уровня изданий, минимизировав влияние отдельных индикаторов. Результаты комплексного библиометрического анализа отражены в ранжировании журналов в рейтинге Science Index за соответствующий год. Как заявлено в Регламенте, по итогам распределения выделяются 25% лучших изданий с максимальными значениями комплексной библиометрической оценки, которые составляют первый квартиль рейтинга Science Index [15].

Из Регламента следует, что на этом этапе значение интегрального показателя Science Index берётся за последний полный год, то есть для редакции RSCI-2018 использованы показатели 2017 г. По данным РИНЦ было установлено, что в 2017 г. в первый квартиль рейтинга Science Index должны войти 882 журнала по разным дисциплинам с интегральным показателем от 0.668 и выше. Среди них 96 изданий по экономической тематике, из которых только 24 включены в список RSCI-2018. Обращает на себя внимание группа журналов из второго и третьего квартиля (значения интегрального показателя находятся в пределах 0.272–0.667 и 0.107– 0.271 соответственно), которые вошли в перечень, несмотря на средние и даже низкие библиометрические показатели. Общая доля такой периодики составляет 11% (рис. 3). Так, журнал “Университетское управление: практика и анализ” входит только во вторую тысячу из 3530 изданий по показателю Science Index, ранжируемых в рейтинге Science Index-2017. Ещё два издания (“Финансы и бизнес” и “Прикладная информатика”) входят в третью тысячу этого списка. Журналы из второй и третьей тысячи имеют низкие библиометрические показатели, недостаточные для их включения в RSCI. Эксперты считают, что в таких случаях положительные решения о их размещении в базе данных необходимо сопровождать детальным объяснением методики отбора [3, с. 325]. Разделяем эту точку зрения и полагаем, что в Регламенте библиографической базы данных RSCI используемые критерии отбора должны быть максимально прозрачными. Очевидно, что не соответствующие заявленным параметрам издания не должны в неё входить.

Рис. 3.

Распределение экономических журналов списка RSCI-2018 по квартилям в рейтинге Science Index

Источник: построено автором по данным НЭБ на 25 сентября 2018 г.

Чтобы оценить уровень экономической периодики, включённой в RSCI-2018, был проанализирован не только интегральный показатель Science Index-2017, но и импакт-фактор издания как индикатор его влиятельности, коррелирующий с мнением исследователей о важности той или иной журнальной продукции в соответствующих дисциплинах [16] и отражающий воздействие научного издания на научное сообщество, его полезность для других учёных [17, с. 43], значимость и престиж [18, с. 7].

Сопоставление двухлетнего импакт-фактора РИНЦ без самоцитирования в группе журналов по тематике “Экономика. Экономические науки” за 2017 г. с медианным значением этого показателя11 позволяет сделать вывод, что у большинства журналов импакт-фактор выше медианного значения по дисциплине (рис. 4). Но только у 10 журналов импакт-фактор больше 1.000, то есть доля высокоцитируемых изданий составляет всего 36% в общем числе экономических журналов списка RSCI-2018.

Рис. 4.

Распределение экономических журналов, включённых в RSCI-2018, по значению двухлетнего импакт-фактора РИНЦ без самоцитирования за 2017 г.

Цифрами на графике обозначены следующие журналы: 1 – Вопросы экономики; 2 – Журнал Новой экономической ассоциации; 3 – Форсайт; 4 – Проблемы прогнозирования; 5 – Мировая экономика и международные отношения; 6 – Экономическая политика; 7 – Journal of Institutional Studies (Журнал институциональных исследований); 8 – Деньги и кредит; 9 – Вестник Санкт-Петербургского университета. Экономика; 10 – Вестник международных организаций: образование, наука, новая экономика; 11 – Экономический журнал Высшей школы экономики; 12 – Russian Journal of Economics; 13 – Вестник Санкт-Петербургского университета. Серия 8: Менеджмент; 14 – Регион: экономика и социология; 15 – ЭКО; 16 – Вестник Московского университета. Серия 6: Экономика; 17 – Российский журнал менеджмента; 18 – Проблемы управления; 19 – Экономика и математические методы; 20 – Университетское управление: практика и анализ; 21 – Журнал экономической теории; 22 – Прикладная эконометрика; 23 – Бизнес-информатика; 24 – Контуры глобальных трансформаций: политика, экономика, право; 25 – Экономическая наука современной России; 26 – Прикладная информатика; 27 – Корпоративные финансы; 28 – Финансы и бизнес

Источник: построено автором по данным НЭБ на 25 сентября 2018 г.

Таким образом, если рассматривать цитирование как инструмент для измерения влияния, которое работа оказывает на сообщество в целом [19, 20], можно говорить о наполненности перечня экономических журналов RSCI-2018 изданиями с высоким авторитетом лишь на треть. При этом, как видно из графика, в список попал один низкоцитируемый журнал: его импакт-фактор ниже медианного показателя. И если высокий импакт-фактор по причине уязвимости перед потенциальным манипулированием [21, с. 133] не всегда служит гарантом качества журнала, то низкое значение этого показателя может косвенно свидетельствовать о локальности издания, то есть о его “выпадении” из “основного научного потока” [22, с. 75], малой привлекательности для читателей и недостаточном авторитете.

Локальность проявляется в ориентированности журнала на узкий круг авторов, которые, как правило, аффилированы с материнской организацией. По мнению экспертов, публикации в локальных журналах малоинтересны для ведущих экономистов, что приводит к вытеснению вполне качественных изданий на “периферию интересов научной общественности” [23, с. 193]. Следует отметить, что в РИНЦ используется показатель, при помощи которого можно выявить локальные журналы. Имеется в виду индекс Херфиндаля по организациям авторов. Его величина зависит от числа учреждений, с которыми аффилированы исследователи, и равномерности распределения между ними статей. Как констатируют специалисты в области ранжирования научных журналов, высокие значения этого индекса свидетельствуют об узости круга авторов и читателей, становятся своего рода мерой “местечковости” издания [21, с. 137, 138].

Для выявления локальных экономических журналов список RSCI-2018 был проанализирован по дополнительному параметру – индексу Херфиндаля по организациям авторов. С учётом значений индекса за 2017 г. проведена градация изданий на три категории: нелокальные журналы с широким кругом авторов (индекс меньше 1000); журналы с довольно высоким уровнем локальности (1000–1800); журналы с очень высоким уровнем локальности (1800–10 000).

Судя по данным, представленным на графике (рис. 5), доля локальных журналов в перечне RSCI-2018 составляет 43%. Ещё 39% изданий имеют довольно высокую степень локальности авторского коллектива, хотя на текущий момент некоторые издания уже не входят в эту категорию (например, “Форсайт”, где доля статей, аффилированных с материнской организацией, вследствие изменения редакционной политики резко уменьшилась в 2018 г., составив всего 21%). Учитывая широко распространённое экспертное мнение о том, что локальные издания не могут претендовать на роль общероссийских или международных [21, с. 138; 23, с. 189], можно задаться вопросом, имеется ли у них потенциал для продвижения в интернациональном пространстве, поскольку даже на национальном уровне они ограничены интересами материнских организаций.

Рис. 5.

Распределение экономических журналов, включённых в RSCI-2018, по значению индекса Херфиндаля по организациям авторов, за 2017 г.

Источник: построено автором по данным НЭБ на 25 сентября 2018 г.

Отдельного внимания заслуживает выявленное противоречие между регламентом отбора журналов для включения в список RSCI, позволяющим отсеять локальные издания, и получившимся результатом. Процедура ориентирована на выбор журналов с высоким авторитетом в научной среде. Согласно принятым критериям, по заключению экспертизы, проводимой Тематическим экспертным советом, “локальные, домашние” журналы не должны оцениваться как издания, имеющие наибольший авторитет в профессиональном сообществе [15]. Между тем итоговый список более чем на 80% состоит из локальных журналов. Это заставляет сомневаться в объективности экспертной оценки по данному критерию и свидетельствует о несовершенстве и непрозрачности процедуры формирования перечня экономических изданий для включения в RSCI.

Оценка журналов по результатам общественной экспертизы. Чтобы снять субъективизм, возникающий в малых экспертных группах, к которым относятся тематические советы и Рабочая группа, при отборе журналов в RSCI используются данные общественной экспертизы. Издания оценивают ведущие российские учёные, имеющие научную степень и показатели в системе РИНЦ, соответствующие установленным пороговым значениям. Эксперты определяют уровень, отражающий, по их мнению, качество журнала [15].

Согласно общественной экспертизе, состоявшейся в 2017 г., сформирован рейтинг журналов, ранжированных по средней оценке экспертов. Выполнен анализ средних оценок экономических журналов из списка RSCI-2018 (см. табл. 1) и проведена градация изданий по трём категориям. К первой отнесены журналы, соответствующие международному уровню (средняя оценка 3.5–4 балла). Большинство экспертов оценили их как достойные включения в международные наукометрические базы данных Web of Science и Scopus. Во вторую категорию вошли издания, соответствующие национальному уровню (2.5–3.4 балла). Большая часть экспертов посчитала, что они, безусловно, достойны включения в Russian Science Citation Index. И, наконец, к третьей категории отнесены журналы, соответствующие среднему уровню (1.5–2.4 балла), которые, по мнению экспертов, могут претендовать на включение в RSCI.

Из диаграммы (рис. 6) видно, что большинство экономических журналов списка RSCI-2018 причислены экспертами к изданиям национального уровня, их доля составляет 70%. Всего три журнала (“Вопросы экономики”, “Проблемы прогнозирования”, “Мировая экономика и международные отношения”) получили высокие оценки и были охарактеризованы как издания международного уровня, достойные включения в глобальные индексы цитирования. Следует подчеркнуть, что пятую часть перечня составляют журналы, получившие невысокие оценки экспертов. Два из них (“Финансы и бизнес” и “Прикладная информатика”), кроме того, имеют низкие библиометрические показатели. Таким образом, при формировании перечня экономических журналов заявленные критерии отбора в RSCI-2018 жёстко не соблюдались. Это свидетельствует о непрозрачности процедуры оценки.

Рис. 6.

Распределение экономических журналов списка RSCI-2018 по научному уровню на основе результатов общественной экспертизы

Журналы международного уровня: Вопросы экономики; Проблемы прогнозирования; Мировая экономика и международные отношения.

Журналы национального уровня: Форсайт; Журнал Новой экономической ассоциации; Вестник Московского университета. Серия 6: Экономика; Вестник Санкт-Петербургского университета. Экономика; Российский журнал менеджмента; Экономический журнал Высшей школы экономики; Экономика и математические методы; Регион: экономика и социология; ЭКО; Деньги и кредит; Вестник Санкт-Петербургского университета. Серия 8: Менеджмент; Экономическая наука современной России; Журнал экономической теории; Корпоративные финансы; Университетское управление: практика и анализ; Экономическая политика; Вестник международных организаций: образование; наука; новая экономика; Journal of Institutional Studies (Журнал институциональных исследований); Бизнес-информатика.

Журналы среднего уровня: Прикладная эконометрика; Финансы и бизнес; Проблемы управления; Прикладная информатика; Контуры глобальных трансформаций: политика, экономика, право.

Журнал без оценки: Russian Journal of Economics.

Источник: построено автором по данным НЭБ на 25 сентября 2018 г.

Оценка журналов на предмет соответствия международным стандартам. По мнению экспертов, в первой редакции перечня RSCI-2015 не были учтены международные стандарты, предъявляемые к научным журналам. В результате, по оценке О.В. Кирилловой, в список попали издания, неготовые к представлению контента международному научному сообществу по причине отсутствия данных, переведённых на английский язык [24].

В ходе анализа изданий по тематике “Экономика. Экономические науки”, включённых в RSCI-2018, на предмет их соответствия основным критериям, позволяющим интегрировать научный контент в зарубежное информационное пространство, были выделены четыре наиболее значимых параметра: наличие англоязычной версии; оформление метаданных статей (аннотация достаточного объёма на английском языке, то есть содержащая не менее 150–250 слов [25, с. 35], список литературы – References – на латинице); наличие у журнала англоязычного сайта; наличие у статьи цифрового идентификатора DOI. Все данные о периодике приводятся по состоянию на конец 2018 г.

Результаты анализа переводного контента показали, что издания используют четыре модели (рис. 7). Некоторые имеют полнотекстовые версии на английском языке (6 изданий) либо публикуют отдельные статьи в переводных журналах, таких как “Problems of Economic Transition”; “Regional Research of Russia” (3 издания). Две другие модели охватывают русскоязычные издания, в которых на английском языке даются выборочные статьи (9 журналов) либо только метаданные каждой публикации (10 журналов).

Рис. 7.

Модели издания переводного контента

*Издания, в которых все статьи имеют англоязычные аннотации достаточного объёма, то есть не менее 150‒250 слов.

Анализ метаданных статей выявил, что два журнала (“Проблемы управления”, “Журнал экономической теории”) не публикуют списки литературы на латинице. Это препятствует корректному учёту ссылок в глобальных индексах цитирования. Кроме того, судя по данным (рис. 7), практически в половине изданий (46%) все или отдельные статьи сопровождаются аннотациями недостаточного объёма, что не соответствует стандартам международных наукометрических баз данных, поскольку такие системы являются реферативными и не размещают полные тексты статей. Именно поэтому к ним предъявляются повышенные требования с точки зрения объёма и содержания аннотаций.

Рис. 8.

География экономических журналов списка RSCI-2018

Источник: построено автором по данным НЭБ на 25 сентября 2018 г.

Следует отметить, что только шесть журналов имеют функциональные сайты на английском языке, содержащие полнотекстовые архивы статей: “Форсайт”, “Проблемы прогнозирования”/“Studies on Russian Economic Development”, “Деньги и кредит”, “Вестник международных организаций: образование, наука, новая экономика”, “Бизнес-информатика”, “Russian Journal of Economics”. У пяти изданий – “Российский журнал менеджмента”, “Экономический журнал Высшей школы экономики”, “Вестник Санкт-Петербургского университета. Экономика”, “Контуры глобальных трансформаций: политика, экономика право”, “Корпоративные финансы” – есть англоязычные сайты, где размещаются метаданные и полные тексты отдельных статей. Остальные публикуют только метаданные статей либо вообще не имеют отдельных сайтов на английском языке, ограничиваясь созданием англоязычной страницы с общей информацией об изданиях. Разумеется, отсутствие таких сайтов лишает журнал возможности увеличить свою международную видимость. В этом случае одна из главных задач базы данных Russian Science Citation Index, заключающаяся в представлении международной общественности лучших российских журналов, становится трудновыполнимой для блока экономических изданий.

При оценке технологического качества экономические журналы из списка RSCI-2018 прошли проверку на предмет наличия в статьях цифрового идентификатора – Digital Object Identifier (DOI), который присваивается публикациям с целью повышения их доступности и открытости в международном информационном пространстве. Сегодня DOI признается всеми ведущими зарубежными издательствами как важнейший атрибут научных статей, он позволяет “идентифицировать, находить полный текст статьи и правильно его цитировать, безошибочно связывая публикации и ссылки на них” [26, с. 61].

В исследуемой группе 24 издания (86%) присваивают DOI каждой публикации. Журналы “Вестник Московского университета. Серия 6: Экономика”, “Прикладная информатика”, “Прикладная эконометрика”, “Экономическая наука современной России” на момент включения в перечень RSCI-2018 г. не снабжали статьи таким указателем.

Согласно базовым требованиям [15], в Russian Science Citation Index должны включаться журналы, у которых есть уникальные цифровые идентификаторы на само издание и отдельные публикации. Между тем в RSCI-2018 попали журналы, не имеющие таких обозначений, но им Регламент рекомендовал получить коды до конца первого квартала 2019 г. Налицо ещё одно противоречие в процедуре отбора изданий. Полагаем, что при формировании национальной базы данных научной периодики нужно ориентироваться на международные наукометрические индексы с жёсткими критериями отбора, согласно которым журналы, не отвечающие базовым критериям, автоматически не допускаются к дальнейшей экспертизе.

Таким образом, не все экономические издания из списка RSCI-2018 в полной мере готовы представить свой контент международной аудитории. Только треть из них выпускается в полнотекстовых версиях на английском языке. Почти половина журналов публикует аннотации недостаточного объёма, ряд изданий не имеет качественных функциональных сайтов на английском языке. Всё это затрудняет продвижение российской экономической периодики за рубежом.

Поскольку база данных Russian Science Citation Index размещается на международной платформе, полагаем, что перечень критериев отбора журналов должен быть расширен за счёт дополнительных параметров, позволяющих оценивать издания и их сайты на соответствие основным международным стандартам и степень адаптированности для зарубежной аудитории.

Анализ полноты охвата перечня экономических журналов из RSCI-2018. Значительной проблемой остаётся крайне узкая география данного корпуса научных изданий (рис. 8). В RSCI-2018 включены журналы, в подавляющем большинстве выпускаемые в Москве и Санкт-Петербурге; их доля превышает 80%. Из региональной периодики в базу RSCI-2018 вошли только два издания из Новосибирска, два – из Екатеринбурга и одно – из Ростова-на-Дону. Таким образом, Центральный и Северо-Западный федеральные округа представлены журналами, которые выпускаются в их центрах. Несколько федеральных округов вообще отсутствуют в этом списке, тогда как в регионах расположено значительное количество научных институтов и исследовательских центров, ведущих масштабные работы. По данным Российского научно-исследовательского института экономики, политики и права в научно-технической сфере, в 2017 г. лидерами по научной продуктивности в WoS в расчёте на 100 учёных стали Сибирский и Дальневосточный федеральные округа (25.7 и 19.8 статей на 100 исследователей соответственно; в Москве и Центральном федеральном округе – 12.8 и 11.3 статей на 100 исследователей соответственно) [27].

Если оценивать экономические журналы с точки зрения двух характеристик – географии, ограниченной главным образом Москвой и Санкт-Петербургом, и доли среди них локальных изданий (более 80%), то можно сделать вывод, что региональные научные организации практически лишены возможности публиковать результаты своих исследований по экономике в журналах, включённых в RSCI. И причины этого не связаны с качеством статей. Сложившаяся ситуация требует оперативного решения. Возможно, нужны дополнительная экспертиза списка экономической периодики, вошедшей в RSCI-2018, и последующее его расширение.

Обращает на себя внимание невысокая (20%) доля в перечне RSCI-2018 журналов, аффилированных с Российской академией наук. Она не изменилась по сравнению с предыдущей версией списка 2015 г. [5, с. 218]. Вместе с тем эксперты полагают, что принадлежность журнала к РАН – это пример следования академическим традициям [28, с. 111], который служит своеобразным показателем качества издания [29, с. 173]. Более того, ряд экономических журналов, выходящих в научных центрах и институтах РАН, существенно опережает большинство изданий из списка RSCI-2018 по библиометрическим показателям и оценкам общественной экспертизы. Это видно из сравнительного анализа параметров нескольких журналов РАН, не включённых в данный список (табл. 2).

Таблица 2.

Сравнительная характеристика параметров журналов институтов и центров РАН, не включённых в список RSCI-2018

Журнал Учредитель/издатель Город  Отметка о включении  в Перечень ВАК. ГИЦ  Интегральный показатель  Science Index-2017  Место в рейтинге Science Index  по тематике “Экономика”/  в общем рейтинге (квартиль)  Средняя оценка по результатам  общественной экспертизы  Место в рейтинге по результатам  общественной экспертизы по  тематике “Экономика”/в общем  рейтинге
Экономика региона Институт экономики УрО РАН Екатеринбург ВАК
WoS
Scopus
8.820 2/12(1) 3.334 4/207
Пространственная экономика Институт экономических исследований ДВО РАН Хабаровск ВАК 4.820 4/36(1) 3.038 26/510
Экономические и социальные перемены: факты, тенденции, прогноз Вологодский научный центр РАН Вологда ВАК
WoS
3.545 7/73(1) 2.836 52/797
Вестник Института экономики РАН Институт экономики РАН Москва ВАК 1.606 35/287(1) 3.162 14/357
Проблемы развития территории Вологодский научный центр РАН Вологда ВАК 1.573 39/298(1) 2.568 95/1344

Источник: построено автором по данным НЭБ на 25 сентября 2018 г.

По итогам комплексной библиометрической оценки эти издания входят в первый квартиль рейтинга Science Index-2017. Журналы “Экономика региона”, “Пространственная экономика”, “Экономические и социальные перемены: факты, тенденции, прогноз” – высокоцитируемые и находятся в первой десятке рейтинга в своей дисциплине: их интегральный показатель Science Index выше, чем у большинства журналов из списка RSCI-2018. В ходе общественной экспертизы РИНЦ эксперты выделили их как издания национального уровня (средняя оценка 2.5–3.4 балла), достойные включения в Russian Science Citation Index. Они входят в Рейтинг ведущих экономических журналов России-2019 (рейтинг Балацкого–Екимовой) [30], составленный на основе анализа библиометрических параметров и экспертных оценок научного уровня. Журнал Института экономических исследований ДВО РАН “Пространственная экономика” занимает 24 место, а журналы Института экономики УрО РАН “Экономика региона” и Вологодского научного центра РАН “Экономические и социальные перемены: факты, тенденции, прогноз” включены в Алмазный список рейтинга, который образуют 13 лучших российских экономических изданий, занимая третье и десятое место соответственно.

Журнал “Пространственная экономика” входит в рейтинг экономических изданий, разработанный под руководством А.Я. Рубинштейна на основе социологического измерения мнения о журналах сообщества экономистов [31], и находится на 11 месте. Четырнадцатую строчку в нём занимает “Вестник Института экономики Российской академии наук”.

Журналы “Вестник Института экономики Российской академии наук” и “Проблемы развития территории” также относятся к первому квартилю рейтинга экономических изданий Science Index-2017; их интегральный показатель выше, чем у 50% журналов по экономике, включённых в RSCI-2018. В результате общественной экспертизы РИНЦ оба эти издания признаны достойными включения в список Russian Science Citation Index.

Научный авторитет журналов обеспечивается традиционно строгой системой рецензирования, публикацией результатов работ ведущих экономистов, следованием международным стандартам. Так, “Экономика региона” и “Экономические и социальные перемены: факты, тенденции, прогноз” входят в глобальные индексы цитирования, что говорит о подтверждении их качества независимым экспертным мнением на международном уровне. Несмотря на это, а также на высокие библиометрические показатели и следование академическим стандартам, ни один из проанализированных журналов не был отобран в RSCI-2018.

Важно оценивать эффект от присутствия изданий в Russian Science Citation Index, который способен повлиять на их конкурентоспособность. Очевидно, что воздействие этого фактора на журналы, индексируемые в базах данных Web of Science и Scopus, будет минимальным. Они занимают сейчас лидирующие позиции, аккумулируя самые качественные публикации ведущих исследователей страны и не испытывая дефицита редакционных портфелей. Единственный негативный эффект от их отсутствия в системе RSCI – репутационный. Получилось, что журналы, фактом вхождения в международные наукометрические базы данных подтвердившие соответствие мировым стандартам, не вошли в национальную базу ведущих научных журналов.

В то же время невключение изданий в RSCI может крайне негативно сказаться на журналах без международной сертификации. Научная политика в стране, основывающаяся на оценке результативности деятельности научных организаций, побуждает учёных публиковаться прежде всего в тех изданиях, которые принимаются к отчётам по грантам и государственным заданиям. Остальные начинают терять своих авторов и, не выдерживая конкуренции, вытесняются на периферию. Недопустимо, когда в их число попадают качественные журналы, поддерживающие академические стандарты научных исследований и публикаций, но пока не имеющие международной сертификации и не входящие в национальный индекс, размещённый на платформе Web of Science. Между тем, как свидетельствуют результаты анализа, на текущий момент нет объективных причин, объясняющих отсутствие ряда изданий в перечне RSCI. В статье детально проанализированы только несколько случаев, но таких примеров больше. Разработчики ресурса могут принять во внимание полученные данные, чтобы усовершенствовать процедуру отбора журналов.

* * *

Комплексный анализ экономических журналов из RSCI-2018 показал, что противоречия предыдущей версии списка, связанные с полнотой охвата и прозрачностью процедуры отбора изданий, в новой редакции не устранены.

В ходе исследования выявлены недостатки предварительной экспертизы журналов. Процедура отбора позволяет на этапе экспертной оценки включать в перечень научные издания, не попавшие в первый квартиль по результатам комплексной библиометрической экспертизы. Таким образом, в RSCI-2018 оказались журналы, входящие во вторую и третью тысячу изданий по показателю Science Index. Кроме того, неясно, каким образом учитываются результаты широкой общественной экспертизы. Как следствие, в итоговый список включены несколько изданий с невысокими библиометрическими показателями, оценённые экспертами как журналы среднего уровня. В то же время превалирование в RSCI-2018 локальных журналов оставляет вопросы о критериях отбора журналов Тематическим экспертным советом.

Большое противоречие видится также в том, что некоторые журналы перечня не соответствуют ряду базовых требований индекса RSCI (например, не присваивают статьям DOI, не имеют достаточных показателей для включения в библиометрический рейтинг Science Index, а также не прошли процедуру общественной экспертизы), но Регламент это допускает. Возникает вопрос о целесообразности базовых требований. Остаётся неясным, с какой целью они выработаны, если в процессе отбора не учитываются как обязательные для всех.

Оценка журналов на предмет соответствия международным стандартам выявила, что некоторые журналы из индекса, размещаемого на международной платформе, ещё не готовы представить свой контент зарубежному читателю. Полагаем, что при отборе изданий в RSCI должны применяться дополнительные параметры, благодаря которым в список будут попадать журналы, которые отвечают основным международным стандартам, тот есть имеют достаточные по объёму аннотации и правильно оформленные метаданные статей на английском языке, функциональные англоязычные сайты и пр.

RSСI позиционируется как совместный проект международной информационно-аналитической компании “Clarivate Analytics” и российской информационной компании “Научная электронная библиотека” с Российской академией наук. Хотя РАН отводится важная роль в организации и проведении экспертизы и оценке качества изданий, доля академических журналов в списке RSCI-2018 оказалась заниженной. Анализ показал, что многие экономические журналы, аффилированные с научными центрами и институтами РАН и оставшиеся вне списка RSCI-2018, существенно опережают большинство включённых в него журналов по библиометрическим показателям и средним оценкам общественной экспертизы.

К сожалению, непрозрачные механизмы отбора в список RSCI-2018 и его неполнота лишают возможности рассматривать данный перечень как значимый для оценки российских журналов. Проблема видится как в соблюдении собственных критериев RSCI при его составлении, так и в недостаточности параметров, которые используются для отбора изданий. На текущий момент создатели ресурса не смогли решить задачи, позволяющие позиционировать этот проект как национальный. Однако, несмотря на выявленные противоречия, обновлённая версия Russian Science Citation Index имеет потенциал, который может быть использован для создания национальной наукометрической базы данных научной периодики, сопоставимой по уровню и качеству с глобальными индексами цитирования Web of Science и Scopus. Для этого необходимы консолидация усилий научного и экспертного сообщества по установлению прозрачных процедур и совершенствованию критериев отбора научных журналов, а также взвешенная позиция Министерства науки и высшего образования Российской Федерации в вопросах развития национальных библиографических баз и повышения уровня научных изданий.

Список литературы

  1. Национальный проект “Наука”. http://static.government.ru/media/files/UraNEEbOnbjocoMLPOnnJZx4OT20Siei.pdf

  2. Беляева С. Естественным путём. Как продвигать российские журналы? // Поиск. 2018. № 45.

  3. Мазов Н.А., Гуреев В.Н., Каленов Н.Е. Некоторые оценки списка журналов Russian Science Citation Index // Вестник РАН. 2018. № 4. С. 322–332.

  4. Методические рекомендации по формированию отчётных данных в ФСМНО (обновление от 2018 г.). https://sciencemon.ru/about/document/41

  5. Третьякова О.В. Экономический журнал в России: проблемы оценки качества // Экономические и социальные перемены: факты, тенденции, прогноз. 2016. № 2(44). С. 211–224.

  6. Garfield E. Citation Indexes to Science: a New Dimension in Documentation Through Association of Ideas // Science. 1955. V. 122. № 3159. P. 108–111.

  7. Jin B., Wang B. Chinese Science Citation Database: Its Construction and Application // Scientometrics. 1999. V. 45. № 2. P. 325–332.

  8. Moskaleva O., Pislyakov V., Sterligov I. et al. Russian Index of Science Citation: Overview and review // Scientometrics. 2018. V. 116. № 1. P. 449–462.

  9. Писляков В.В. Зачем создавать национальные индексы цитирования? // Научные и технические библиотеки. 2007. № 2. С. 65–71.

  10. Wu Y., Pan Y., Zhang Y. et al. China Scientific and Technical Papers and Citations (CSTPC): History, Impact and Outlook // Scientometrics. 2004. V. 60. № 3. P. 385–397.

  11. Negishi M., Sun Y., Shigi K. Citation Database for Japanese Papers: A New Bibliometric Tool for Japanese Academic Society // Scientometrics. 2004. V. 60. № 3. P. 333–351.

  12. Третьякова О.В. Развитие национального индекса цитирования как условие формирования системы оценки результатов научной деятельности // Экономические и социальные перемены: факты, тенденции, прогноз. 2015. № 1(37). С. 230–245.

  13. Касьян А., Кулешова А., Мелихова Л. О второй версии Russian Science Citation Index на платформе Web of Science (RSCI-2018). http://www.sib-science.info/ru/ras/analiticheskaya-zapiska-14082018.

  14. Москалева О.В. РИНЦ и RSCI – дополнение или замена? Научное издание международного уровня-2016: решение проблем издательской этики, рецензирования и подготовки публикаций // Материалы 5-й Международной научно-практической конференции. Москва, 17–20 мая 2016 г. Екатеринбург: Изд-во Уральского государственного университета им. А.М. Горького, 2016. С. 195–201.

  15. Регламент библиографической базы данных Russian Science Citation Index. М., 2018. https://elibrary.ru/projects/rsci/reglament_RSCI.pdf

  16. Hoeffel C. Journal impact factors (letter) // Allergy. 1998. V. 53. № 12. P. 1225.

  17. Гарфилд Ю. Можно ли выявлять и оценивать научные достижения и научную продуктивность? // Вестник АН СССР. 1982. № 6. С. 42–50.

  18. Маркусова В.А. Качество научных журналов и основные критерии для включения в информационную систему Web of Science компании Thomson Reuters // Acta Naturae. 2012. № 2(13). С. 6–14.

  19. Cole S., Cole J. Scientific output and recognition. A study in the operation of the reward system in science // American Sociological Review. 1967. V. 32. P. 377–390.

  20. Moed H.F. Citation analysis in recourse evaluation // Information Science and Knowledge Management. 2005. V. 9. P. 346.

  21. Муравьев А.А. О научной значимости российских журналов по экономике и смежным дисциплинам // Вопросы экономики. 2013. № 4. С. 130–151.

  22. Зорин Н.А. Оценка качества научных публикаций // Медицинские технологии: оценка и выбор. 2011. № 3. С. 71–76.

  23. Балацкий Е.В., Екимова Н.А. Конкуренция экономических журналов России: итоги трёх волн рейтингования // Экономическая политика. 2017. № 6. С. 178–201.

  24. Виды на видимость. Станет ли наша наука заметнее? // Поиск. 2016. № 15.

  25. Методические рекомендации по подготовке и оформлению научных статей в журналах, индексируемых в международных наукометрических базах данных / Под общ. ред. О.В. Кирилловой. М.: Ассоциация научных редакторов и издателей, 2017.

  26. Кириллова О.В. Как оформить статью и научный журнал в целом для корректного индексирования в международных наукометрических базах данных // Научный редактор и издатель. 2018. № 3(1–2). С. 52–72.

  27. Парфёнова С.Л., Долгова В.Н., Безроднова К.А. Подходы к анализу публикационной активности регионов России по данным Web of Science и Scopus. Доклад на 8-й Международной научно-практической конференции “Научное издание международного уровня-2019: стратегия и тактика управления и развития”. https://conf.rasep.ru/WCSP/WCSP2019

  28. Балацкий Е.В., Екимова Н.А. Опыт составления рейтинга российских экономических журналов // Вопросы экономики. 2015. № 8. С. 99–115.

  29. Клейнер Г.Б. Миссия академического журнала: между фундаментальностью и актуальностью // Журнал Новой экономической ассоциации. 2011. № 12. С. 171–173.

  30. Балацкий Е.В., Екимова Н.А. Конкуренция российских экономических журналов на мировом рынке // Экономические и социальные перемены: факты, тенденции, прогноз. 2019. № 3. С. 124–139.

  31. Рубинштейн А.Я. Российские экономические журналы: табель о рангах // Экономическая наука современной России. 2018. № 1. С. 108–130.

Дополнительные материалы отсутствуют.