Национальный агрегированный рейтинг
| Топ (Лига) | Образовательная организация / Регион | Оценка в рейтинге | ||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|
| 1 | 2 | 3 | 4 | 5 | 6 | 7 | 8 | 9 | ||||
 Топ-25 Премьер-лига | Московский государственный университет имени М.В.Ломоносова г. Москва | A | A | A | A | A | A | D | A | A | | |
| Топ-25 Премьер-лига | Санкт-Петербургский государственный университет г. Санкт-Петербург | A | A | A | A | A | A | B | A | A | | |
| Топ-25 Премьер-лига | Национальный исследовательский университет «Высшая школа экономики» г. Москва | A | A | A | A | A | A | B | A | A | | |
| Топ-25 Премьер-лига | Санкт-Петербургский политехнический университет Петра Великого г. Санкт-Петербург | A | A | A | A | A | A | A | A | A | | |
| Топ-25 Премьер-лига | Казанский (Приволжский) федеральный университет Республика Татарстан | A | A | A | A | A | B | A | A | A | | |
| Топ-25 Премьер-лига | Первый Московский государственный медицинский университет имени И.М. Сеченова Министерства здравоохранения Российской Федерации г. Москва | A | A | A | A | A | A | B | C | A | | |
| Топ-25 Премьер-лига | Национальный исследовательский университет ИТМО г. Санкт-Петербург | A | A | A | A | A | A | B | B | A | | |
| Топ-25 Премьер-лига | Национальный исследовательский Томский политехнический университет Томская область | A | A | A | A | A | A | A | B | A | | |
| Топ-25 Премьер-лига | Национальный исследовательский Томский государственный университет Томская область | A | B | A | A | A | A | A | A | A | | |
| Топ-25 Премьер-лига | Национальный исследовательский технологический университет «МИСиС» г. Москва | A | C | A | A | A | B | A | B | A | | |
| Топ-25 Премьер-лига | Национальный исследовательский ядерный университет "МИФИ" г. Москва | A | A | A | A | A | A | E | B | A | | |
| Топ-25 Премьер-лига | Российский государственный университет нефти и газа (национальный исследовательский университет) имени И. М. Губкина г. Москва | A | C | A | A | A | A | B | C | A | | |
| Топ-25 Премьер-лига | Московский физико-технический институт (национальный исследовательский университет) Московская область | A | C | A | A | A | A | E | A | A | | |
| Топ-25 Премьер-лига | Российский университет дружбы народов г. Москва | A | A | A | A | A | B | B | B | A | | |
| Топ-25 Премьер-лига | Нижегородский государственный университет им. Н.И. Лобачевского Нижегородская область | A | B | B | A | A | B | A | A | A | | |
Методология национального агрегированного рейтинга
Рассматриваются 9 рейтингов, удовлетворяющие требованиям публичности (полная информация представлена в открытом доступе), стабильности (существуют не менее трех лет), массовости (оценивают не менее 100 вузов) и периодичности (оценивание проводится ежегодно):
- Национальный рейтинг университетов - Интерфакс
- Рейтинг «Первая миссия» (на базе проекта «Лучшие образовательные программы инновационной России»)
- Рейтинги университетов RAEX
- Рейтинг по индексу Хирша
- Рейтинг по данным Мониторинга эффективности
- Рейтинг «Оценка качества обучения»
- Рейтинг по результатам профессионально-общественной аккредитации
- Рейтинг «Международное признание»
- Самые востребованные вузы России
Используется новая методика агрегирования рейтингов (она получила название «МетАЛиг» [1] ), которая предполагает:
a) переход от мест в рейтингах к лигам;
b) использование нового математического аппарата сверток, базирующихся на Теории голосования в малых группах (Борда, Кондорсе, Симпсона, плюралитарная и др.)
c) введение новых «слабых» сверток - Bn,m
Методология исследования
Каждая рассматриваемая система рейтингования (оценивания) носит количественный характер (место, бал). Соответственно, все вузы можно отранжировать в порядке убывания. По каждому отдельному рейтингу разбивается шкала ранжирования на непересекающиеся группы, например, на квартили. В результате разбиения каждый вуз по каждому i-му рейтингу попадает в определенную группу (например, первую, вторую, третью или четвертую квартиль) и получает соответствующую оценку Ai, Bi, Ci или Di. Если вуз не оценивался рейтингом, то он получает оценку Ei.
Таким образом, положение вуза среди всех рассматриваемых 9 рейтингов, может быть охарактеризовано 9-мерным вектором оценок. Например, (A, D, C, A, C, D, E, B, A).
Далее используются, так называемые, слабые свертки B 6,9. Суть процедуры состоит в том, что в итоговой оценке учитываются не все результаты 9 рейтингов, а только 6 лучших (у каждого вуза они могут быть свои).
Для перехода от многокритериального выбора к однокритериальной задаче используется аналог метода Борда.
В процедуре Борда каждому элементу приписывается ранг. Если имеется k областей, то первой упорядоченной области приписывается ранг, равный (k-1), второй — (k-2) и т.д. Последнему объекту в упорядочении областей присваивается ранг, равный 0. Ранжирование объектов строится в порядке убывания суммы рангов (индекса Борда). Лучший вариант определяется максимальным значением индекса Борда, который рассчитывается как сумма рангов приписываемых областям.
Таким образом, новое ранжирование строится по сумме 6 лучших результатов. Значение индекса Борда в случае 9 рейтингов может варьироваться от 0 до 4*6=24. Те вузы, чей индекс Борда равен максимальному значению 24, составляют Премьер-лигу. Первая лига – это вузы, чей индекс Борда равен 23, 22 или 21 и т.д. Всего можно выделить 10 лиг, объединенных в 4 зоны:
- Наводнов В. Г., Мотова Г. Н., Рыжакова О. Е. Сравнение международных рейтингов и результатов российского Мониторинга эффективности деятельности вузов по методике анализа лиг //Вопросы образования. – 2019. – №. 3.С. 130–151.
- Болотов В.А., Мотова Г.Н., Наводнов В.Г., Рыжакова О.Е. Как сконструировать национальный агрегированный рейтинг? // Высшее образование в России, 2020. - № 1. - С.9-24.