Паспорт проекта

Аннотация проекта

Целью проекта «Построение рейтингов методами коллективного выбора» является применение разработанных в теории коллективного выбора методов ранжирования альтернатив в практических задачах, требующих построения рейтинга конкретной группы объектов, оцениваемых по совокупности разнородных критериев. Лица, принимающие решения, то есть совершающие выбор наилучшей альтернативы, а также те, кто оценивает их действия, все больше и больше полагаются на различные формальные упорядочения (рейтинги). Например, на сегодняшний день существует множество критериев (различные индексы) для объективной оценки качества научных журналов, но из-за большого количества таких индексов зачастую происходит так, что оценки влиятельности журналов не совпадают, и рейтинги, построенные с помощью этих индексов, получаются различными.

В данном исследовании мы будем учитывать не один из индексов для определения качества журналов, а сразу несколько. Это делается для получения максимально объективной и всеохватывающей оценки качества журналов с помощью сразу нескольких критериев. Уникальность исследования заключается в том, что при ранжировании журналов будут использоваться методы коллективного выбора, что позволит сделать результаты работы еще более точными и обоснованными, так как эти методы обычно имеют аксиоматическое обоснование. Кроме того, мы предполагаем исследовать различные страновые рейтинги и предложить их новые версии.

The aim of the project is the application of ranking methods developed in the social choice theory to solving practical problems that require the construction of an aggregate ranking based on several criteria. Today decision-makers, who choose the best alternative, are more and more relying on a variety of formal ordering (ratings). For example, there are many criteria (various bibliometric indices) to assess the quality of scientific journals, but since there are several indices, rankings based on different indices will differ and that poses a problem.

In this study we will solve the problem of competing evaluations through calculating aggregate journal rankings, which aggregate the information on journals’ comparative values contained in single index-based rankings. As a result, the most objective and comprehensive assessment of the journals’ quality is obtained. The uniqueness of the study is that the journal ranking will use methods of the social choice theory that will make the results more accurate and valid, since these methods are usually axiomatic justified. In addition, we expect to explore different country ratings and offer new versions of them.

Цель проекта

Целью проекта «Построение рейтингов методами коллективного выбора» является применение разработанных в теории коллективного выбора методов ранжирования альтернатив в практических задачах, требующих построения рейтинга конкретной группы объектов (например, каких-либо экономических организаций), оцениваемых по совокупности разнородных критериев. Задачами проекта являются

1. теоретическое исследование возможности применения конкретных способов ранжирования альтернатив, основанных на предпочтениях оценивающего их коллектива людей, в конкретных задачах ранжирования на основании многокритериальных оценок;
2. применение вышеназванных методов для построения рейтингов научных журналов (по социально-экономическим наукам), агрегирующих информацию об их сравнительной значимости, которую дают ранжирования по отдельным библиометрическим показателям; 
3. построение альтернативных версий рейтинга экономической конкурентоспособности стран, рассчитываемого экспертами Всемирного Экономического Форума, а также построение агрегированных рейтингов в других социально-экономических задачах.

Информационной базой исследования являются данные, публикуемые организациями, осуществляющими оценивание рассматриваемых групп объектов ранжирования.

Сроки проведения работы над проектом 

февраль 2012 - декабрь 2013

Ожидаемые научные результаты исследований

Планируется решить ряд прикладных проблем, связанных с построением методами теории коллективного выбора рейтингов, агрегирующих информацию, которую дают ранжирования рассматриваемых объектов по различным критериям.

Задача агрегированного ранжирования будет решаться для

1. научных журналов по экономике; журналы ранжируются по степени их влиятельности на основании массива данных о значениях основных библиометрических индексов (двух- и пятилетний импакт-факторы, индекс оперативности, индексы SNIP и SJR, индекс Хирша и индекс влияния);
2. научных журналов по политологии; журналы ранжируются по степени их влиятельности на основании массива данных о значениях тех же библиометрических индексов;
3. научных журналов по менеджменту; журналы ранжируются по степени их влиятельности на основании массива данных о значениях тех же библиометрических индексов;
4. стран мира; страны ранжируются по степени экономической конкурентоспособности на основании 12 отдельных ранжирований по 12 базовым показателям (pillars) модели экономической конкурентоспособности, разработанной экспертами Всемирного экономического форума.
5. стран мира; страны ранжируются по степени конкурентоспособности в сфере промышленного производства на основании 8 отдельных ранжирований по 8 базовым переменным модели, разработанной экспертами Организации индустриального развития, являющейся подразделением ООН (UNIDO).

Будет также предложено теоретическое обоснование возможности применения конкретных способов ранжирования альтернатив. В частности планируется изучить возможность применения традиционных методов коллективного выбора для задачи с большим числом альтернатив и малым числом агентов. Ряд методов будет применен для решения указанных выше прикладных проблем. Также планируется создать специальные алгоритмы для вычисления ранжирований, получаемых с помощью вышеупомянутых методов, в условиях сверх-большого количества альтернатив (что характерно, например, для ситуации поискового запроса в интернете).

В итоге будут подготовлены совместные тексты двух препринтов и статей, а также будет сделано не менее одного доклада на научных конференциях (в том числе международных) и семинарах всеми участниками НУГ. Андрушко М.А., Захлебиным А.В., Миришли Д.Ф., Моховиковым А.И. будут разработаны программы для расчета рейтингов, а также интерактивные оболочки для представления результатов.