1. Процедура отбора

Автором была собрана оригинальная база данных по российским журналам в области экономики и смежных дисциплин на основе информации, размещенной на сайте Научной электронной библиотеки (НЭБ).

Процедура формирования выборки включает три шага:

1. Были отобраны издаваемые в России журналы, относимые НЭБ-РИНЦ к категории «Экономика. Экономические науки» (фильтр в разделе «Каталог журналов») и имеющие по состоянию на май 2012 г. импакт-фактор РИНЦ более 0,05.

2. К полученному списку были добавлены журналы с меньшим или отсутствующим импакт-фактором, в которых более половины опубликованных статей относятся к экономике. С этой целью был использован фильтр НЭБ-РИНЦ «Распределение публикаций по тематике».

3. Были исключены журналы, по которым на момент сбора данных (май-июль 2012 г.) отсутствовала детальная статистика НЭБ-РИНЦ (например, не было оглавлений номеров за 2010-2011 гг. и т.д.).

2. Отбор показателей

В основе отбора показателей лежат два принципа — возможность их расчета на основе имеющихся данных НЭБ-РИНЦ и недвусмысленностью их интерпретации в российском контексте.

По этим критериям были отобраны 14 показателей:

1. Импакт-фактор РИНЦ без учета самоцитирования (статистика НЭБ-РИНЦ)

2. Коэффициент самоцитирования (статистика НЭБ-РИНЦ), %

3. Доля научных статей (в их общем количестве), не имеющих ни одной ссылки, %

4. Средний объем научной статьи, страниц

5. Количество ссылок в расчете на одну страницу научной статьи

6. Доля материалов, публикуемых под заголовком «научная статья», в общем числе журнальных страниц, %

7. Индекс Херфиндаля для концентрации публикуемых статей по организации происхождения (аффилиации авторов)

8. Индекс Херфиндаля для концентрации журналов, цитирующих опубликованные в данном журнале работы

9. Доля ссылок на научные журналы в общем числе ссылок, %

10. Доля ссылок на зарубежные источники в общем числе ссылок, %

11. Доля ссылок на зарубежные научные журналы в общем числе ссылок, %

12. Средний возраст цитируемых источников (по международным журналам), лет

13. Доля экономики и смежных дисциплин в списке заявленных журналом тем, % (статистика НЭБ-РИНЦ «Информация о журнале», «Раздел рубрикатора ГРНТИ»)

14. Доля публикаций экономической тематики среди цитирующих данный журнал источников, % (статистика НЭБ-РИНЦ «Распределение цитирующих публикаций по тематике»).

3. Процедура агрегирования.

Алгоритм процедуры агрегирования, использованный автором, включает следующие этапы:

1. Трансформация показателей, чтобы рост их значения можно было интерпретировать как рост значимости журнала (умножение на –1 для показателей самоцитирования, доли статей без списка литературы, индексов Херфиндаля, среднего возраста цитируемых источников).

2. Стандартизация показателей (путем вычитания среднего и деления на стандартное отклонение), с целью сделать их сопоставимыми друг с другом и агрегируемыми в обобщающие статистики. Таким образом, каждый стандартизованный показатель, имеющий среднее 0 и дисперсию 1, характеризует относительное положение журналав сформированной выборке.

3. Ограничение выбросов, при котором значения меньше –3 или больше 3 трансформированы в –3 и 3 соответственно (разновидность винзорирования).

4. Расчет обобщающих статистик — суммы нескольких стандартизованных показателей. Процедура подразумевает равные веса для всех отобранных показателей17.

5. Трансформация обобщающих статистик в ранг журнала, при котором большей статистике (= более значимому журналу) соответствует меньший ранг.

4. Классификация на основе принципа робастности.

Окончательная классификация журналов выполнена путем построения и обобщения нескольких рангов, опирающихся на разный набор показателей.

Было построено и проанализировано пять рангов. Первый основан на суммировании шести наиболее общих, базовых показателей. При построении второго ранга к шести базовым показателям были добавлены показатели, характеризующие узость аудитории журнала. Третий ранг рассчитан на основе шести базовых показателей и показателей качества цитируемой литературы. Четвертый ранг учитывает экономический контент журнала — к шести базовым показателям добавлены показатели, характеризующие принадлежность журнала к экономической науке. Наконец, пятый ранг построен путем суммирования всех частных показателей, за исключением показателя «импакт-фактор РИНЦ без учета самоцитирования». Исключенный частный показатель можно интерпретировать двояко. Он может отражать как сильные стороны журнала, например репутацию, так и слабые стороны, например, перекрестное цитирование родственными изданиями, выходящими в одном и том же издательстве. Автор исходит из предположения о том, что ведущие журналы должны обладать устойчивостью к исключению этого показателя.

Построенные ранги были суммированы следующим образом. В первую очередь была выделена группа журналов, для которых все пять рангов не превышают 3019. Эти журналы классифицированы как «ведущие» по экономике и смежным дисциплинам, в дальнейшем называемые также журналами категории «А». Далее были выделены не вошедшие в первую группу журналы, для которых все пять рангов не превышают 60. Это так называемые журналы категории «В». Данные позволяют выделить последующие категории, например, категорию «С», включающую не вошедшие в первые две категории журналы с рангом не более 90.