Сравнение международных рейтингов и результатов российского Мониторинга эффективности деятельности вузов по методике анализа лиг

A new technique called Method of Analysis of Leagues (MethALeague) is proposed for comparing performance of higher education institutions measured by different assessment methods. The MethALeague uses the convolution operations from the theory of small-group decision making to create aggregate charts of university leagues based on the performance indicators obtained with different assessment techniques. Specifically, researchers are given the opportunity to bring widely divergent university performance indicators into unified assessment charts and carry out comparative analysis of different assessment approaches. The MethALeague was applied successfully to compare the performance indicators of the Project 5–100 universities reflected in three major global rankings, Academic Ranking of World Universities, QS World University Rankings, and Times Higher Education World University Rankings. A formalized concept of “world ranking” proposed in the article makes it possible to visualize the performance dynamics of Russia’s top universities and compare it to that of the top universities in other countries (United States, Great Britain, Australia, Germany, and China). Suggestions are made on using a modified version of the MethALeague at the national level to analyze the results of university performance monitoring and compare them to the universities’ global ranking positions. The method described in the article could be applied by educational authorities, researchers and higher education institutions to determine the frameworks of strategic development, both for specific universities and for Russia’s higher education system as a whole.Представлена новая методика, позволяющая проводить сравнительный анализ деятельности образовательных организаций при разных процедурах оценивания, — метод анализа лиг (МетАЛиг). Она дает возможность строить агрегированные таблицы лиг вузов по результатам оценивания, проведенного в разных системах, с использованием известных методов сверток из теории голосования в малых группах. Тем самым появляется возможность агрегировать абсолютно разные оценки вуза в единую оценку в форме таблиц лиг и проводить сравнительный анализ разных подходов к оцениванию. Применение МетАЛиг позволило решить задачу сравнительного анализа результатов деятельности российских вузов — участников Проекта «5–100», отраженных в наиболее известных международных рейтингах: ARWU, QS, THE. Предложена формализация понятия «мировой рейтинг», позволившая визуализировать динамику развития лучших российских вузов и сравнить ее с динамикой развития лучших вузов других стран (США, Великобритания, Австралия, Германия, Китай). Рассматривается также вариант использования МетАЛиг на национальном уровне для анализа результатов Мониторинга эффективности деятельности вузов и их сравнения с позициями в «мировом рейтинге». Делается вывод о возможности применения данной методики органами управления образованием, а также исследователями и образовательными организациями для определения направлений стратегического развития как отдельных вузов, так и отечественной системы высшего образования в целом