ОРГАНИЗАЦИЯ ИССЛЕДОВАТЕЛЬСКОЙ ДЕЯТЕЛЬНОСТИ
В последние годы научная общественность бурно обсуждает критерии оценки продуктивности отдельных учёных, научных коллективов и организаций. Одна из наиболее влиятельных на сегодняшний день стратегий определения научной эффективности — количественная характеристика публикационной активности. Такая характеристика применительно к отечественным авторам, организациям и русскоязычной научной периодике вырабатывается информационно-аналитической системой "Российский индекс научного цитирования". В предлагаемой вниманию читателей статье исследуется конкретный пример работы этой системы — обнародованные библиометрические показатели 22 институтов Отделения химии и наук о материалах РАН, обсуждаются достоинства и недостатки основанных на этих показателях принципов ранжирования научных организаций.
РАНЖИРОВАНИЕ ИНСТИТУТОВ РОССИЙСКОЙ АКАДЕМИИ НАУК С ПОМОЩЬЮ РОССИЙСКОГО ИНДЕКСА НАУЧНОГО ЦИТИРОВАНИЯ
НА ПРИМЕРЕ ИНСТИТУТОВ ХИМИЧЕСКОГО ПРОФИЛЯ
И.В. Зибарева, В.Н. Пармон
Осуществляемые в настоящее время в соответствии с постановлением Правительства РФ [1] количественная оценка результативности деятельности институтов Российской академии наук и основанное на ней ранжирование являются предметом оживлённых дискуссий, прежде всего по причине существенных организационных выводов, которые предполагается сделать в академии по итогам ранжирования. Основная проблема состоит в том, что любая количественная оценка деятельности разнопрофильных научных организаций в соответствии с едиными критериями, с одной стороны, несомненно, полезна, но,
Щ — « ■
^ Т
г л1
I ш
Авторы работают в Институте катализа им. Г.К. Борес-кова СО РАН. ЗИБАРЕВА Инна Владимировна — кандидат педагогических наук, руководитель Информационно-аналитического центра института. ПАРМОН Валентин Николаевич — академик, директор института, председатель Объединённого учёного совета СО РАН по химическим наукам.
с другой, заведомо неполна и поэтому неоднозначна, особенно с точки зрения принимаемых на её основе административных решений.
Следует отметить, что Российская академия наук в целом и её Сибирское отделение в частности давно проводят мониторинг результатов деятельности своих научных организаций с использованием статистических данных [2, 3]. Но подготовленные на основании постановления [1] нормативные документы (типовые методики) [4, 5] заметно отличаются от сложившейся практики и по разным причинам подвергаются серьёзной критике, в том числе в связи с неоднозначностью многих количественных показателей научной деятельности [6, 7].
Так, в предлагаемых методиках [4, 5] предусмотрено использование библиометрических показателей (индикаторов), представленных в ряде библиографических баз данных (БД), в том числе в Российском индексе научного цитирования (РИНЦ) — национальной информационно-аналитической системе, созданной Научной электронной библиотекой (НЭБ). В настоящее время РИНЦ аккумулирует более 2 млн. публикаций российских авторов, а также сведения о цитировании этих публикаций из более чем 2 тыс. российских журналов. РИНЦ предназначен прежде всего для оперативного обеспечения научных исследований актуальной справочно-библиографи-ческой информацией. Вместе с тем предполагается его использование в качестве аналитического инструмента. На основании заключённого в 2005 г. контракта с Федеральным агентством по науке и инновациям (Роснаука) НЭБ в рамках РИНЦ занимается разработкой компьютерных средств
Таблица 1. Библиометрические показатели организаций в РИНЦ
Общие Показатели за последние 5 лет*
Общее количество публикаций Общее количество цитирований Количество авторов Индекс Хирша Позиция в рейтинге российских научно-исследовательских организаций Общее количество публикаций Количество публикаций в зарубежных журналах Количество публикаций в российских журналах Количество публикаций в российских журналах из перечня Высшей аттестационной комиссии Количество публикаций в российских переводных журналах Количество публикаций в журналах, имеющих ИФ Количество публикаций, процитированных хотя бы 1 раз Количество совместных публикаций с другими организациями Количество совместных публикаций с зарубежными авторами Количество авторов Количество цитирований в РИНЦ Средневзвешенный ИФ журналов, опубликовавших статьи Среднее количество публикаций в расчёте на одного автора Среднее количество цитирований в расчёте на одну публикацию Количество самоцитирований (из публикаций этой же организации)
* В настоящее время за 2006—2010 гг.
библиометрической аналитики, направленной на количественную оценку профессиональной деятельности отдельных учёных, научно-исследовательских организаций, научных журналов и т.д. [8, 9]. Это соответствует общемировой тенденции: аналитические надстройки, позволяющие вычислять значения различных библиометриче-ских индикаторов, присутствуют в ряде глобальных научно-технических информационных ресурсов, например, Web of Science (WoS) и Scopus, а также их производных, таких как БД Essential Science Indicators (ESI) и Journal Citation Reports (JCR), портал SCImago.
Библиометрические индикаторы — непосредственно наблюдаемые переменные, основанные на анализе публикаций и обеспечивающие воспроизводимые количественные измерения. Их эмпирической базой являются научные тексты. Количество каждого элемента из всего массива таких текстов — публикаций, ссылок, журналов и т.д. — выступает в качестве значения соответствующего индикатора. Одновременно индикаторы отображают латентные, то есть непосредственно не наблюдаемые переменные. Так, число публикаций может в первом приближении считаться библиометрическим индикатором латентной переменной "научная продуктивность", а число ссылок на них — индикатором латентной переменной "научный вклад" или "научная значимость" [10]. Наиболее часто используемые библиометрические индикаторы — количество публикаций и ссылок на них (включая такой комбинированный показатель, как индекс Хир-
ша), а также импакт-факторы (ИФ) журналов, представляющие собой разновидность показателей цитируемости.
Библиометрические методы регулярно применяются для изучения состояния российской науки. В частности, с использованием БД Science Citation Index (SCI) и Chemical Abstracts (CA), доступных в международной научно-технической информационной сети STN International, были получены и проанализированы библиометриче-ские показатели шести химических институтов СО РАН за период с 1995 по 2006 г. [11], а также российских химических исследований начала XXI в. [12]. Одним из методологических выводов из проделанной работы стало осознание необходимости тщательного изучения возможностей и недостатков применяемых БД в контексте конкретных библиометрических исследований.
В РИНЦ каждое из приблизительно 6 тыс. зарегистрированных там учреждений имеет профиль "Анализ публикационной активности", содержащий значения ряда библиометрических показателей, определяемых посредством исследования приписываемых данному учреждению публикаций (табл. 1). Публикации приписываются к тем организациям, которые указаны в качестве места работы авторов. В профиле организации также представлены статистические отчёты, характеризующие тематику её публикаций по рубрикатору и ключевым словам, журналы, в которых опубликованы статьи, другие организации, совместно с которыми публиковались работы, авторы и соавторы публикаций, распределение публикаций по
Таблица 2. Первая двадцатка сводного рейтинга РИНЦ научно-исследовательских организаций
Количество Средний ИФ Индекс Хирша
№ Организация публикаций цитирований
1 Объединённый институт ядерных исследований, Дубна 5407 18824 1.821 108
2 Физический институт им. П.Н. Лебедева РАН, Москва 4250 13743 1.785 108
3 Физико-технический институт им. А.Ф. Иоффе РАН, Санкт-Петербург 5570 13284 1.210 104
4 Химический факультет МГУ им. М.В. Ломоносова, Москва 4453 10430 1.302 74
5 Институт теоретической и экспериментальной физики, Москва 2405 10518 2.647 93
6 Физический факультет МГУ им. М.В. Ломоносова, Москва 3062 5672 1.139 71
7 Российский научный центр Курчатовский институт, Москва 3051 6121 0.999 84
8 Институт ядерной физики им. Г.И. Будкера СО РАН, Новосибирск 1749 10148 2.443 90
9 Петербургский институт ядерной физики им. Б.П. Константинова РАН, Гатчина 1746 7773 2.440 89
10 Институт элементоорганических соединений им. А.Н. Несмеянова РАН, Москва 2484 4980 1.093 57
11 Институт космических исследований РАН, Москва 1830 5671 1.561 68
12 Институт катализа им. Г.К. Борескова СО РАН, Новосибирск 2170 4710 1.195 64
13 Институт общей физики им. А.М. Прохорова РАН, Москва 2524 5268 0.906 65
14 Институт физики высоких энергий, Протвино 1477 8987 3.422 84
15 Научно-исследовательский институт ядерной физики им. Д.В. Скобельцына МГУ, Москва 2329 5692 0.983 54
16 Институт физики им. Л.В. Киренского СО РАН, Красноярск 1798 3547 1.524 47
17 Национальный исследовательский ядерный университет МИФИ, Москва 2707 7191 0.669 57
18 Институт проблем химической физики РАН, Черноголовка 2949 4488 0.743 48
19 Институт ядерных исследований РАН, Троицк 1330 4529 1.723 82
20 Институт кристаллографии им. А.В. Шубникова РАН, Москва 1616 3981 1.141 62
годам, по числу цитирований и по числу соавторов. Для последних пяти лет в профиле приведены распределения количества публикаций и цитирований по годам. Индекс Хирша организации не привязан к определённым временным периодам, а вычисляется на основании всей совокупности имеющихся данных. Из профиля организации можно перейти к её позиции в различных рейтингах РИНЦ, охватывающих в настоящее время примерно 1700 российских научно-исследовательских учреждений, включая сводный рейтинг, верхняя часть которого по состоянию на декабрь 2011 г. приведена в таблице 2.
Библиометрические индикаторы, представленные в таблице 1, не равноценны с точки зрения количественной оценки и ранжирования учреждений. Такие индикаторы, как абсолютное количество публикаций и их авторов, отображают, скорее всего, одну и ту же латентную переменную — число сотрудников учреждения, то есть, в сущности, вели
Для дальнейшего прочтения статьи необходимо приобрести полный текст. Статьи высылаются в формате PDF на указанную при оплате почту. Время доставки составляет менее 10 минут. Стоимость одной статьи — 150 рублей.