Национальный агрегированный рейтинг вузов

История разработки Национального агрегированного рейтинга (НАР) началась в 2019 году, когда Европейская ассоциация гарантии качества высшего образования (ENQA) после экспертной проверки и последующего включения Нацаккредцентра в Европейский реестр аккредитационных агентств (EQAR) рекомендовала организации и Нацаккредсовету усовершенствовать процедуру постаккредитационного мониторинга с привлечением широкого экспертного сообщества. 

Тогда возникла идея – создать агрегатор и собрать в него имеющиеся в России независимые оценки вузов, что позволило бы проводить мониторинг после того, как образовательная организация прошла аккредитацию. В результате и был пос-троен Национальный агрегированный рейтинг.

НАР также можно считать превентивным ответом на поручение Президента РФ создать национальные рейтинги вузов, озвученное на встрече с членами Общественной палаты РФ в июне 2020 года. Показательно, что за решение этой задачи разработчики рейтинга – Гильдия экспертов в сфере профессионального образования – взялись ещё до поручения главы государства. В результате этой работы НАР был представлен общественности ещё осенью 2019 года.

Как был построен НАР

В основу первого НАР легли результаты 8 ведущих национальных рейтингов *, удовлетворяющих условиям:

• публичности (открытый доступ);
• стабильности (не менее 3 лет);
• массовости (ранжированы не менее 100 вузов);
• периодичности (составляется ежегодно).

Для того, чтобы в итоге из нескольких рейтингов построить единый «суммарный», использовалась новая методика, получившая название «МетАЛиг» (Методика анализа лиг).

Данная методика предполагала:

1. Переход от мест в рейтингах к лигам. 
Рейтинги преобразовывались в таблицу лиг, что позволило агрегировать абсолютно разные способы оценки вуза в единую оценку, а также взглянуть на систему в целом и с разных ракурсов.

2. Использование векторного подхода МакКинси-Абеля.
Каждый вуз оценивался через вектор оценок.

3. Использование математического аппарата Теории голосования в малых группах (свертки Борда, Кондорсе, Симпсона, плюралитарная и другие) для свертывания в единую таблицу лиг.
Для каждого вуза из 8 оценок выбрали 5 лучших. Это можно сравнить с оценкой результатов в спорте, когда, например, при прыжках в длину выбирается лучший результат из трех попыток.

4. Введение «слабых» сверток – B n, m.

• Лига определялась, исходя из суммы мест (баллов), где «А» – 4 балла; «В» – 3 балла; «С» – 2 балла; «D» – 1 балл; «E» – 0 баллов.
• Максимальное суммарное значение индекса Борда: 5×4 =20
• В Премьер-лиге (см. таблицу 1) были представлены вузы, которые по пяти показателям из восьми получили оценку «А», т. е. векторная оценка (А, А, А, А, А) и индекс Борда = 20.
• Минимальное суммарное значение индекса Борда: 0×4=0.

Что касается методологии НАР текущего периода[3], сегодня агрегацию проходят уже 11 рейтингов (см. рис. 1). Для сравнения, в 2020 году рассмат-ривалось 9, а в 2021-м – 8 рейтингов. При этом условия, которым эти системы оценивания должны удовлетворять, не изменились.

Рейтинги, рассматриваемые в НАР в настоящее время

Рассматриваются 12 рейтингов, удовлетворяющих требованиям публичности (полная информация представлена в открытом доступе), стабильности (существуют не менее трех лет), массовости (оценивают не менее 100 вузов) и периодичности (оценивание проводится ежегодно):

1. Национальный рейтинг университетов - Интерфакс
2. Рейтинг «Первая миссия» (на базе проекта «Лучшие образовательные программы инновационной России»)
3. Рейтинги университетов RAEX
4. Рейтинг по индексу Хирша
5. Рейтинг по данным мониторинга эффективности
6. Рейтинг «Оценка качества обучения»
7. Рейтинг по результатам профессионально-общественной аккредитации
8. Рейтинг «Международное признание»
9. Рейтинг Forbes
10. Рейтинг «Национальное признание»
11. Рейтинг Superjob
12. Рейтинг HeadHunter

Рейтинг можно считать инструментом отслеживания постаккредитационных действий вузов (собственно, такая задача изначально ставилась разработчиками НАР) и гарантировать: если каждый год вуз не опускается по лигам, значит результаты у него хорошие и дополнительные исследования не требуются.

Ещё один немаловажный профит – в том, что результаты НАР может использовать самый широкий круг пользователей: не только абитуриенты при выборе вуза, но и, например, администрация образовательной организации ВО для самодиагностики и планирования. 

Это делает рейтинг реальным инструментом развития, дающим пищу для размышления, а не «диагнозом».

НАР прошёл уже несколько этапов развития. Сегодня можно констатировать, что намеченные цели достигнуты, а именно:

• филиалы учитываются в НАР с 2020 года;
• количество агрегируемых рейтингов, как уже было сказано выше, увеличено до 11-ти; 
• в июле 2021 года на заседании Нацаккредсовета представлен Предметный национальный агрегированный рейтинг (ПНАР).

*

1. Национальный рейтинг университетов - Интерфакс
2. Рейтинг «Первая миссия» (на базе проекта «Лучшие образовательные программы инновационной России»)
3. Рейтинги университетов RAEX
4. Рейтинг востребованности вузов - РИА-Новости
5. Рейтинг по данным Мониторинга эффективности
6. Рейтинг «Оценка качества обучения»
7. Рейтинг по результатам профессионально-общественной аккредитации
8. Рейтинг «Международное признание»