Методология предметного национального агрегированного рейтинга
В данном агрегированном рейтинге рассматриваются 8 рейтингов, составленных на основе открытых баз данных и удовлетворяющие требованиям публичности (полная информация представлена в открытом доступе) , стабильности (существуют не менее трех лет и проводится периодическое оценивание) , массовости (оценивают не менее 100 вузов) :
- Предметный рейтинг по результатам профессионально-общественной аккредитации
- Предметный рейтинг «Оценка качества обучения»
- Предметный рейтинг по индексу Хирша
- Предметный рейтинг RAEX
- Предметный рейтинг «Первая миссия»
- Предметный ГАР (Российские вузы)
- Предметный рейтинг «Национальное признание»
- Предметный рейтинг SuperJob
Используется методика «МетАЛиг»[1] , которая предполагает:
- переход от мест в рейтингах к лигам;
- использование математического аппарата сверток, базирующихся на теории голосования в малых группах (Борда, Кондорсе, Симпсона, Плюралитарная и др.);
- введение «слабых» сверток — Bn,m.
Методология исследования
Каждая рассматриваемая система рейтингования (оценивания) носит количественный характер (место, балл). Соответственно, все вузы можно отранжировать в порядке убывания. По каждому отдельному рейтингу разбивается шкала ранжирования на непересекающиеся группы, например, на квартили. В результате разбиения каждый вуз по каждому i-му рейтингу попадает в определенную группу (например, первый, второй, третий или четвертый квартиль) и получает соответствующую оценку Ai, Bi, Ci или Di. Если вуз не оценивался рейтингом, то он получает оценку Ei.
Для перехода от многокритериального выбора к однокритериальной задаче используется метод Борда.
В процедуре Борда каждому элементу приписывается ранг. Если имеется k областей, то первой упорядоченной области приписывается ранг, равный (k-1), второй — (k-2) и т.д. Последнему объекту в упорядочении областей присваивается ранг, равный 0. Ранжирование объектов строится в порядке убывания суммы рангов (индекса Борда). Лучший вариант определяется максимальным значением индекса Борда, который рассчитывается как сумма рангов приписываемых областям.
- Наводнов В. Г., Мотова Г. Н., Рыжакова О. Е. Сравнение международных рейтингов и результатов российского Мониторинга эффективности деятельности вузов по методике анализа лиг //Вопросы образования. – 2019. – №. 3.С. 130–151.
- Болотов В.А., Мотова Г.Н., Наводнов В.Г., Рыжакова О.Е. Как сконструировать национальный агрегированный рейтинг? // Высшее образование в России, 2020. - № 1. - С.9-24.
Медальный зачет вузов России
Образовательная организация / Регион | Премьер-лига | 1 лига | 2 лига | 3 лига | 4 лига | Всего реализуемых УГСН |
---|---|---|---|---|---|---|
г. Москва | 20 | 13 | 0 | 0 | 0 | 33 |
г. Санкт-Петербург | 20 | 7 | 1 | 0 | 0 | 28 |
Свердловская область | 19 | 17 | 4 | 0 | 0 | 40 |
Томская область | 19 | 12 | 0 | 0 | 0 | 31 |
г. Москва | 19 | 6 | 0 | 0 | 0 | 25 |
Республика Татарстан | 18 | 11 | 6 | 0 | 0 | 35 |
г. Санкт-Петербург | 17 | 12 | 2 | 0 | 0 | 31 |
Ростовская область | 16 | 16 | 7 | 2 | 1 | 42 |
г. Москва | 14 | 5 | 4 | 0 | 0 | 23 |
г. Москва | 12 | 12 | 0 | 1 | 0 | 25 |
г. Москва | 12 | 4 | 1 | 0 | 0 | 17 |
Нижегородская область | 10 | 9 | 5 | 0 | 0 | 24 |
г. Москва | 10 | 4 | 3 | 0 | 1 | 18 |
Новосибирская область | 9 | 13 | 6 | 1 | 0 | 29 |
Томская область | 9 | 7 | 2 | 0 | 0 | 18 |
г. Санкт-Петербург | 9 | 6 | 7 | 0 | 0 | 22 |
Новосибирская область | 9 | 5 | 4 | 0 | 0 | 18 |
Республика Мордовия | 7 | 23 | 6 | 2 | 0 | 38 |
г. Москва | 7 | 6 | 1 | 0 | 0 | 14 |
Республика Башкортостан | 7 | 5 | 6 | 1 | 0 | 19 |
г. Москва | 7 | 5 | 5 | 0 | 0 | 17 |
Российская академия народного хозяйства и государственной службы при Президенте Российской Федерации г. Москва | 7 | 4 | 2 | 1 | 0 | 14 |
г. Москва | 7 | 2 | 3 | 3 | 1 | 16 |
Приморский край | 6 | 20 | 12 | 5 | 1 | 44 |
г. Москва | 6 | 4 | 2 | 1 | 1 | 14 |
Московская область | 6 | 2 | 4 | 1 | 1 | 14 |
Красноярский край | 5 | 23 | 10 | 2 | 0 | 40 |
Самарская область | 5 | 19 | 2 | 1 | 0 | 27 |
г. Москва | 5 | 8 | 3 | 1 | 1 | 18 |
г. Москва | 5 | 5 | 3 | 1 | 0 | 14 |
г. Москва | 5 | 2 | 2 | 0 | 0 | 9 |
Ростовская область | 4 | 11 | 16 | 6 | 2 | 39 |
г. Москва | 4 | 10 | 3 | 0 | 0 | 17 |
Пермский край | 4 | 9 | 8 | 1 | 0 | 22 |
Тюменская область | 4 | 8 | 9 | 2 | 0 | 23 |
г. Москва | 4 | 7 | 9 | 1 | 1 | 22 |
Республика Татарстан | 4 | 6 | 6 | 1 | 0 | 17 |