В 2016-2017 гг. на базе аналитического Интернет–журнала «Неэргодическая экономика» при финансовой поддержке Российского фонда фундаментальных исследований (проект №16-02-12015) был реализован проект по созданию информационно-аналитической базы данных рейтингов различных явлений в сфере экономики. Для этого на указанном информационном портале был создан раздел «Рейтинги» (http://nonerg-econ.ru/cat/9/), в котором на текущий момент размещен 31 рейтинговый продукт, включающие в себя порядка 90 рейтингов за разные периоды времени.

Проект выполнялся с целью развития информационных технологий, используемых для поддержки научных исследований в области экономики. Его реализация позволяет не только испытать на практике новую информационную технологию, обеспечивающую создание открытого архива рейтинговых продуктов различных явлений на разных уровнях (локальный, региональный, национальный, глобальный и др.) с возможностью их дальнейшей обработки с целью верификации и оценки уровня доверия (адекватности) тому или иному рейтингу, но и производить аналитические исследования, повышающие продуктивность использования информации в научной работе и открывающие новые возможности для наукометрических исследований.

Рассмотрим, какие выводы были получены по результатам проведенной аналитической работы.

Прежде всего, следует отметить, что исследования проводились по трем направлениям. Первое направление ориентировано на непосредственный анализ рейтингуемых объектов. В частности, достаточно большое количество опубликованных образовательных и академических рейтингов позволило выявить основные тенденции развития и скрытые угрозы рынка экономических исследований, а также оценить образовательный потенциал регионов России. Так, аналитическая работа, проведенная по академическим рейтингам, показала, что в России сложилась концентрическая модель организации отечественной науки, когда все ресурсы и результаты сосредоточены на строго ограниченном участке территории. Иными словами, в Россия реализована модель с узким передовым научным ядром и обширной научной периферией. Кроме того, наблюдается усиление процесса маргинализации российских регионов, когда все большее число региональных участников рынка оказываются за бортом развернувшейся конкуренции и все большее число регионов «выдавливается» с рынка передовых исследований на фоне сжимающегося регионального передового научного ядра.

Аналогичная работа, проведенная по образовательным рейтингам, показала наличие такой же тенденции в области распределения образовательных услуг по регионам, а также нарастание процесса «схлопывания» образовательного пузыря, раздутого в России к 2008 году. Кроме того, по результатам сопоставления Образовательного рейтинга регионов России, характеризующего субъекты РФ с точки зрения имеющихся в них образовательного потенциала в сфере ВПО, и Рейтинга академической активности регионов России (экономика), который ранжирует регионы, где ведутся экономические исследования, в ряде регионов отмечено недоиспользование имеющегося у них образовательного потенциала в сфере ВПО. Так, Саратовская, Орловская, Курская, Томская области, Республика Татарстан и ряд других регионов занимают достаточно высокие места в размещенных на портале образовательных рейтингах, однако их положение в академических рейтингах не столь высоко. Это позволяет предположить, что в данных регионах недоиспользуются имеющиеся образовательные ресурсы.

Второе направление исследовательской работы направлено на поиск консенсусных решений относительно одинаковых объектов, оцениваемых разными рейтингами. Примером такого решения и результатом аналитической работы с размещенными рейтингами является Консенсусный рейтинг ведущих экономических журналов России, который представляет собой некую усредненную оценку четырех популярных рейтингов российских экономических журналов – рейтинговых списков Муравьева, Стерлигова (ВШЭ), Балацкого–Екимовой и Рубинштейна. В чем-то эти рейтинги совпадают, в чем-то сильно расходятся. При этом сами рейтинги аккумулируют в себе все возможные варианты и способы составления рейтингов: широкие и узкие экспертные опросы, использование библиометрических данных системы РИНЦ, а также смешанные подходы. Обобщенный рейтинг журналов выступает в качестве своеобразного консенсуса сообщества экономистов о том, какие академические журналы считать по-настоящему качественными и авторитетными.

Третья сторона аналитической работы связана с оценкой популярности и адекватности размещенных в базе данных рейтингов путем построения количественного индекса доверия. Каждый посетитель может не просто посмотреть интересующие его сведения, но и оставить свое мнение о степени надежности рейтингового продукта и о своем доверии ему. Для этого каждый рейтинг снабжен специальной опросной анкетой, позволяющей получить ответы относительно доверия к рассматриваемому рейтингу на качественном уровне. Такой подход не обременяет пользователя, но вместе с тем позволяет участникам проекта преобразовать полученные анкетные данные в специальный индекс, который представляет собой сумму взвешенных оценок рейтинга всеми пользователями, участвовавшими в опросе. Число респондентов и величина индекса доверия, приведенные в табл.1, указываются для каждого рейтинга и постоянно обновляются.

Таблица 1. Количество проголосовавших и индексы доверия по рейтингам, размещенным на сайте

Проведённая в этом направлении аналитическая работа позволила выявить ряд специфических моментов. Во-первых, по ряду рейтингов наблюдались ярко выраженные «вспышки» повышенной активности респондентов. Например, по академическим рейтингам журналов и экономистов Финуниверситета среднее количество респондентов до ноября 2017 года не превышало 100 человек. При этом индекс доверия находился в районе 60,0. Однако в последующий период отмечается резкое возрастание числа опрошенных до указанных выше значений с существенным занижением рассчитываемого показателя. При этом аналитические характеристики сайта показывают практически одновременный заход и голосование более 100 респондентов. Данная ситуация наводит на мысли о целенаправленной диверсии в адрес конкретных рейтинговых продуктов и показывает возможность манипулирования формируемыми оценками доверия рейтингам. Аналогичная ситуация наблюдается и по ряду других рейтинговых продуктов.

Во-вторых, полученные оценки позволяют говорить об общем настроении общества в отношении доверия/недоверия к рейтингам. Если не учитывать рейтинги, в отношении которых были отмечены указанные выше «вспышки» активности, то средний индекс доверия по размещенным на сайте рейтинговым продуктам составил 64,58, что говорит, скорее, о доверии к данным рейтингам, чем о недоверии им.

Описанные выше результаты аналитической работы были доложены и обсуждены на международных и всероссийских конференциях, а также на научных семинарах Центрального экономико–математического института Российской академии наук (ЦЭМИ РАН) и Российского научно–исследовательского института экономики, политики и права в научно–технической сфере (РИЭПП), а именно:

– Доклад «Опыт рейтингования экономических журналов России: итоги, проблемы, пути решения» на 6-й Международной научно–практической конференции «Научное издание международного уровня – 2017: мировая практика подготовки и продвижения публикаций» (апрель 2017);

– Доклад «Ядро экономического сообщества и роль ведущих экономических журналов» на ежегодной конференции Новой Экономической Ассоциации «Политические системы и экономическое развитие: проблемы взаимосвязи» (декабрь 2017);

– Доклад «Тенденции развития российского сектора экономических исследований (на данных РИНЦ)» на научном семинаре Лаборатории математической экономики ЦЭМИ РАН (апрель 2017);

– Доклад «Рейтинговая методология идентификации университетов мирового класса» на научно-практическом семинаре «Неэргодическая экономика: идентификация университетов мирового класса» Российского научно–исследовательского института экономики, политики и права в научно–технической сфере (РИЭПП) (май 2017);

– Доклад «Тенденции развития рынка экономических исследований: основные угрозы» на научном семинаре Лаборатории математической экономики ЦЭМИ РАН (декабрь 2017).

***

Статья выполнена при финансовой поддержке Российского фонда фундаментальных исследований (проект №16-02-12015).

Официальная ссылка на статью:

Екимова Н.А. Исследование информационно-аналитического портала экономических рейтингов// «Неэргодическая экономика», 24.01.2018.