http://www.ras.ru/digest/showdnews.aspx?id=2df9537f-8b69-4687-91cd-3ce89c8b965a&print=1
© 2024 Российская академия наук

МЕРИТЬ ИЛИ РЕЗАТЬ?

15.11.2013

Источник: Поиск, Надежда Волчкова

Ученые увидели опасность в новых правилах оценки институтов

Не проходит недели, чтобы власть не выпустила нового документа, определяющего жизнь организаций РАН. Появившееся на днях Постановление Правительства РФ от 1 ноября 2013 г. №979 “О внесении изменений в Постановление Правительства Российской Федерации от 8 апреля 2009 г. №312” определяет правила оценки результативности деятельности научных организаций. От прочих принимавшихся в последнее время бумаг эта отличается тем, что относится не только к академическим структурам, но ко всем “выполняющим научно-­исследовательские, опытно-­конструкторские и технологические работы гражданского назначения”.

Сама идея составления карты российской науки не нова. Минобрнауки даже начало реализовывать аналогичный проект, судьба которого до сих пор не ясна. Предъявленная в его рамках демоверсия платформы, где организации, научные группы и отдельные ученые будут представлять результаты своей работы, оказалась сырой и была отправлена на доработку. Не прижилась и запущенная в 2009 году постановлением правительства система оценки институтов. Министерство попыталось ее исправить и в августе текущего года выставило на общественное обсуждение новую версию правил рейтингования НИИ. “Поиск” подробно писал о ней в материале “Вот тебе порог!” (№33­34).

Ключевые отличия очередной реинкарнации правил от прежнего варианта ­ вневедомственный характер оценки в рамках “сопоставимых референтных групп”, уменьшение числа используемых для аттестации НИИ формальных критериев, введение пороговых показателей, позволяющих разбивать институты на три категории, добавление к проводимой раз в пять лет проверке с “выставлением оценки” ежегодного мониторинга, не грозящего тяжелыми последствиями. Напомним также, что институты, попавшие в третью категорию, подлежат реорганизации или ликвидации.

В ходе обсуждения ученые высказали множество критических замечаний к документу и рекомендаций по его улучшению. Учтены ли они в итоговой версии? С этим вопросом “Поиск” обратился к курирующему данный вопрос в Российской академии наук вице-президенту РАН Сергею Алдошину.

­ Нельзя сказать, что наших предложений не заметили, однако добавленные в порядке “учета мнения” слова настолько неопределенны, что общего смысла документа не меняют, ­ отметил Сергей Михайлович. ­ Мы, например, писали, что нельзя мерить результативность исключительно формальными показателями. В правилах появилась фраза о том, что оценка “проводится на основании всестороннего, в том числе экспертного анализа”. Однако как он осуществляется и как учитываются его результаты, не расшифровано.

Академия ставила вопрос о том, что организации, коллективы которых участвуют в работах по закрытым тематикам, явно окажутся в ущемленном положении, поскольку число открытых публикаций там будет меньше среднего, установленного без учета данного фактора. В правилах теперь говорится, что для анализа сведений, составляющих государственную, коммерческую, служебную или иную охраняемую законом тайну, нельзя привлекать международных экспертов. Но как будет вестись такой анализ, не определено. Между тем более 30 институтов РАН входят в список организаций оборонно­промышленного комплекса.

Академик Алдошин считает, что межведомственный характер оценки может оказаться фикцией. “В документе говорится о том, что при отнесении организации к той или иной референтной группе будут учитываться не только ее научная специфика и виды проводимых исследований, но и источники финансирования, организационно­правовая форма, ­ заявил он. ­ При таком подходе велика вероятность, что академические институты, вузы и отраслевые НИИ попадут в разные референтные группы и наши организации будут сравнивать между собой”.

Но главный изъян принятого постановления, по мнению вице-президента РАН, состоит в том, что оно противоречит государственным интересам. “Оценка должна начинаться с четкого определения миссии каждой научной организации ­ значимости для нашего общества проводимых исследований, ­ уверен Сергей Алдошин. ­ Закрытие институтов по итогам процедуры сравнения в референтных группах, принцип формирования которых до конца не ясен, может привести к безвозвратной потере критически важных для будущего страны направлений”.

Обеспокоенность официальных лиц РАН в полной мере разделяет научная общественность. Комиссия общественного контроля за ходом и результатами реформ в сфере науки выразила возмущение тем, что ученые отстранены от оценки научной эффективности институтов. Устанавливать правила игры и составлять “черные списки” на ликвидацию будут федеральные органы исполнительной власти. По мнению членов комиссии, “полное отсутствие профессиональной научной составляющей в принятии решений о ликвидации и слиянии институтов является мощным коррупциогенным фактором”.

“Постановление узаконивает либо некомпетентное руководство научными организациями со стороны чиновников, либо скрытое (через чиновников) руководство со стороны отдельных особо влиятельных представителей научного менеджмента, не имеющих для этого формальных полномочий и не несущих, следовательно, никакой ответственности за свои решения”, ­ говорится в заявлении комиссии.

Совершенно очевидно, что получившие карт­бланш на ранжирование институтов далекие от науки чиновники будут опираться в основном на формальные показатели. Набор нормативов, за выполнение которых исследовательские коллективы будут биться в ближайшие годы, Минобрнауки пока не утвердило. Но проект этого документа, известного как “Приложение к типовой методике оценки”, выносился на общественное обсуждение. Вряд ли он претерпит существенные изменения: как показывает практика, мнение научного сообщества власть волнует мало.

Мы попросили прокомментировать раздел по наукометрии, который традиционно вызывает больше всего вопросов, известного специалиста в области библиометрии, заведующую отделением Всероссийского института научной и технической информации РАН Валентину Маркусову.

­ Предложенные авторами библиометрические показатели представляются мне вполне разумными, ­ заявила Валентина Александровна. ­ Правда, есть моменты, которые вызывают недоумение. Непонятно, почему такой важный показатель научной значимости, как грантовая активность, решено измерять в рублях и сравнивать в этих единицах с совершенно несопоставимыми по масштабам финансирования Федеральными целевыми программами.

И главный вопрос: кто будет оперировать собранными данными? Это ведь тонкая работа, а библиометристов необходимого уровня у нас единицы. В специфике конкретной области должны разбираться эксперты. Так, импакт­факторы журналов можно сравнивать только в рамках данной предметной категории. Особенно меня беспокоит ситуация с общественными науками. В базу Web of Science, из которой будут браться сведения про число публикаций, цитируемость, импакт­фактор, внесены всего четыре российских журнала из этой области знания.

В общем, привычная уже ситуация. Документы готовятся за закрытыми дверьми, оппонентов стараются не слышать, тестировать сложную и явно недоработанную систему будут прямо на ходу, на живых научных коллективах. Реформа продолжается...