Результаты апробации модельной методологии ранжирования
российских вузов
Апробация модельной методологии ранжирования российских вузов состоялась в период с апреля по июль 2012 г. Участниками апробации стали 103 российских университета, из которых 1 – ведущий университет, 8 – федеральных, 29 – национальных исследовательских, 31 университетов, программы стратегического развития которых были поддержаны МОН РФ, и 35 других российских вузов.
Данные, полученные в ходе апробации, прошли процедуру обработки и верификации. В ходе верификации значения базовых индикаторов прошли проверку на предмет пропущенных значений и значений с большим отклонением от среднего по выборке. Осуществлена процедура сверки результатов верификации с участниками апробации. Ранжирование вузов осуществлялось с учетом результатов верификации.
По итогам апробации для университета сформирован профайл с результатами 6 типов ранжирований, в котором представлено краткое описание полученных распределений, отмечены сильные и слабые стороны вуза в соответствии полученными результатами по каждому из 6 типов ранжирований, краткий вывод о конкурентных преимуществах учебного заведения внутри своей категории и в общей выборке (Приложение 1).
Стоит обратить внимание, что среди вузов группы «Другие» Российский химико-технологический университет занял 1 место. В своей группе вузов университет является лидером (1 место) по направлениям «Научно-исследовательская деятельность» и «Обучение и преподавание». По итогам ранжирования 103 вузов Российский химико-технологический университет занял 21 место. Среди 103 вузов РХТУ входит в десятку лидеров по направлению «Международная деятельность». Наиболее сильными направлениями деятельности вуза являются «Научно-исследовательская деятельность», «Обучение и преподавание» и «Международная деятельность».
Приложение 1
Результаты апробации модельной методологии ранжирования российских вузов
Российский химико-технологический университет
В рамках модельной методологии ранжирования на основе данных, которые были получены в ходе ее апробации, опробованы два независимых вида ранжирований:
I. Ранжирование по отдельным группам вузов[1];
II. Ранжирование всех 103 вузов-участников апробации.
Для получения результатов по каждому независимому виду ранжирований были произведены:
- Общее ранжирование
- Ранжирование по пяти направлениям деятельности вузов (научно-исследовательская деятельность, обучение и преподавание, международная деятельность, трансфер знаний, взаимодействие с регионом)
- Ранжирование по 13 индикаторам глобальных рейтингов
Обращаем Ваше внимание на то, что расчет комплексных индикаторов для разных видов ранжирований проводится отдельно: каждая отдельная группа вузов образует отдельную генеральную совокупность. Получаемые результаты являются независимыми друг от друга, рассматриваются самостоятельно и могут быть использованы для разных задач, стоящих перед вузами.
Результаты по двум видам ранжирований для Российского химико-технологического университета представлены далее.
Таблица 1. Результаты РХТУ по итогам ранжирования группы вузов «Другие»[2]
Место вуза | Нормализованный балл вуза по стобалльной шкале | |
Ранжирование вузов категории «Другие вузы» | ||
1. Ранжирование вузов внутри категории (из 35 вузов, макс 100 балл) | 1 | 100 |
2. Ранжирование вузов внутри категории по пяти направлениям деятельности (из 35 вузов): | ||
2.1. Научно-исследовательская деятельность (макс 100 балл.) | 1 | 100 |
2.2. Обучение и преподавание (макс 100 балл) | 1 | 100 |
2.3. Международная деятельность (макс 100 балл) | 5 | 69,9 |
2.4. Трансфер знаний (макс 100 балл) | 28 | 23,6 |
2.5. Взаимодействие с регионом (макс 100 балл) | 22 | 43,0 |
3. Ранжирование вузов внутри категории по 13 глобальным индикаторам (из 35 вузов, макс 100 балл) | 2 | 99,9 |
МЕСТО РХТУ В РАНЖИРОВАНИИ ВУЗОВ В ГРУППЕ «ДРУГИЕ УНИВЕРСИТЕТЫ»
Ранжирование группы «другие университеты» показывает, что университет является лидером в этой группе вузов. Позиция (место) РХТУ в общем ранжировании «других университетов» определяется вкладом отдельных направлений.
Ранжирование по отдельным направлениям деятельности вуза демонстрирует, что РХТУ является лидирует по таким направлениям, как «научно-исследовательская деятельность» (1 место) и «обучение и преподавание» (1 место). Позиции университета по другим направлениям представлены в таблице 1.
Рис. 1. Сравнение РХТУ с другими вузами по пяти направлениям деятельности
Балл РХТУ по направлению «Научно-исследовательская деятельность» в категории «Другие университеты» составил 100.
Максимальные значения нормализованного балла присвоены четырем индикаторам[3]:
- «Количество публикаций на одного ППС в Scopus» (1)[4]
- «Количество публикаций на одного ППС в Web of Science» (1)
- «Доля доходов от научных исследований» (1).
- «Количество цитирований на одну статью в РИНЦ» (1)
Еще 6 индикаторов характеризуются высокими показателями нормализованного балла:
- «Количество российских исследовательских грантов (РГНФ, РФФИ, Фонд Бортника)» (0,7)
- «Доля ППС с ученой степенью кандидата и доктора наук» (0,63)
- «Количество цитирований на одну статью в Web of Science» (0,57)
- «Количество цитирований на одного ППС в РИНЦ» (0,56)
- «Доля расходов на научные исследования» (0,55)
- «Количество цитирований на одну статью в Scopus» (0,5)
Ряд индикаторов направления имеет низкие значения нормализованного балла:
- «Сумма российских исследовательских грантов (РГНФ, РФФИ, Фонд Бортника)» (0,49)
- «Количество цитирований на одного ППС в Web of Science» (0,33)
- «Количество публикаций на одного ППС в РИНЦ» (0,24)
- «Количество цитирований на одного ППС в Scopus» (0,18)
- «Доля студентов очной формы обучения, участвовавших в НИР» (0,08).
По направлению «Обучение и преподавание» РХТУ также занимает 1 позицию и имеет балл – 100.
Высокую позицию (место) университету обеспечивают индикаторы, имеющие высокие значения нормализованного балла:
- «Доля молодых штатных ППС, получивших престижные национальные гранты и премии, от всей численности молодых штатных ППС» (1)
- «Доля выпускников, трудоустроившихся в течение 1 года по специальности/ направлению обучения после окончания вуза» (0,84)
- «Средний балл ЕГЭ поступивших» (0,8)
- «Доля выпускников, поступивших на программы аспирантуры» (0,8)
- «Доля студентов, получивших престижные стипендии» (0,78)
- «Количество ППС и НР, награжденных премиями мирового и национального уровня» (0,6)
- «Доля защитившихся аспирантов (до года)» (0,54)
Ряд индикаторов имеют низкие значения:
- «Средства на подготовку студентов» (0,4)
- «Численность аспирантов» (0,37)
- «Количество ППС и НР, защитивших докторские диссертации» (0,35)
- «Доля программ, на которые были приняты студенты с высоким баллом ЕГЭ» (0,2)
- «Доля ППС, являющихся действительными членами и членами-корреспондентами РАН» (0,2)
- «Соотношение численности студентов и ППС» (0,14)
- «Доля студентов магистратуры, закончивших бакалавриат и/или специалитет в других вузах» (0,1)
- «Доля защитившихся аспирантов (до двух лет)»(0,09)
- «Соотношение численности приема студентов магистратуры к численности приема студентов бакалавриата» (0,03)
- «Затраты на оборудование и инфраструктуру (для обеспечения обучения)» (0,02)
- «Доля абитуриентов-победителей Всероссийской олимпиады школьников» (0,007)
Индикатору «Доля образовательных программ, прошедших международную аккредитацию» присвоено нулевое значение.
По направлению «Международная деятельность» балл вуза составил 69,9.
Индикатору «Доля ППС, приглашенных для преподавания в зарубежные университеты дальнего зарубежья» присвоено максимальное значение нормализованного балла (1), и по этому индикатору университет является лидером в своей группе вузов.
Высокие значения нормализованного балла имеют индикаторы:
- «Доля ППС, приглашенных для преподавания в зарубежные университеты (общая)» (0,78)
- «Сумма международных исследовательских грантов» (0,65).
Остальные индикаторы имеют низкие значения нормализованного балла:
- «Доля аспирантов, участвовавших в зарубежных стажировках» (0,38)
- «Доля ППС, приглашенных для преподавания в зарубежные университеты» (0,22)
- «Доля иностранных студентов в общей численности студентов» (0,18)
- «Доля студентов, обучающихся по программам, реализуемым совместно с зарубежными партнерами» (0,17)
- «Количество международных исследовательских грантов» (0,1)
- «Доля студентов, прошедших обучение за рубежом» (0,04)
- «Численность иностранных ППС» (0,02)
- Доля доходов из иностранных источников (0,002).
Нули присвоены трем индикаторам:
- «Доля учебной нагрузки иностранных ППС в учебной нагрузке штатных ППС» (0)
- «Доля ППС с дипломом/ ученой степенью зарубежного вуза/вузов» (0)
- «Доля программ, реализуемых совместно с зарубежными партнерами» (0).
Университет может повысить свою позицию по данному направлению за счет увеличения количества иностранных преподавателей, иностранных студентов, количества совместных образовательных программ.
Бал университета по направлению «Трансфер знаний» составляет 23,6.
Ни один из индикаторов направления не имеет высокого нормализованного балла:
- «Доля доходов из внебюджетных источников» (0,28)
- «Количество специалистов, прошедших повышение квалификации и/или профессиональную переподготовку в вузе» (0,15)
- «Количество образовательных программ, реализуемых по заказу сторонних организаций» (0,004)
- «Количество поставленных на бухгалтерский учет объектов интеллектуальной собственности» (0,0008).
Индикатору «Доход от продажи объектов интеллектуальной собственности» присвоено нулевое значение.
РХТУ может улучшить свою позицию по данному направлению за счет индикаторов, имеющих низкие значения нормализованного балла.
По направлению «Взаимодействие с регионом» РХТУ набрал 43 балла.
Наибольшее значение нормализованного балла присвоено индикатору «Процент выпускников, работающих в регионе» (0,7).
Остальные индикаторы имеют низкие значения нормализованного балла:
- «Доля студентов, прошедших практику в региональных организациях и предприятиях» (0,27)
- «Количество договоров на исследования, заключенных с региональными партнерами» (0,23)
- «Доля доходов вуза из региональных источников» (0,17).
МЕСТО РХТУ В РАНЖИРОВАНИИ «ДРУГИХ УНИВЕРСИТЕТОВ» ПО 13 ИНДИКАТОРАМ ГЛОБАЛЬНЫХ РЕЙТИНГОВ
В ранжировании «других университетов» по 13 индикаторам глобальных рейтингов среди 35 вузов РХТУ занимает 2 место. По стобалльной шкале из 100 возможных баллов вуз набрал 99,9 баллов. Университет имеет высокие показатели публикационной активности, но недостаточно высокие показатели по доле иностранных студентов и численности иностранных преподвателей.
Таблица 2. Нормализованные баллы РХТУ по 13 индикаторам глобальных рейтингов при ранжировании вузов категории «Другие университеты»
Индикаторы глобальных рейтингов | Нормализованный балл |
Количество публикаций на одного ППС в Scopus | 1 |
Количество публикаций на одного ППС в Web of Science | 1 |
Доля доходов от научных исследований | 1 |
Доля аспирантов, которые защитились в срок до одного года после завершения обучения в прошедшем учебном году | 0,65 |
Количество цитирований на одну статью в Web of Science | 0,57 |
Количество цитирований на одну статью в Scopus | 0,5 |
Количество цитирований на одного ППС в Web of Science | 0,33 |
Доля доходов из внебюджетных источников | 0,28 |
Доля иностранных студентов в общей численности студентов | 0,19 |
Доля доходов вуза из региональных источников | 0,17 |
Соотношение численности студентов и ППС | 0,14 |
Доля аспирантов, которые защитились в срок свыше одного года, но до двух лет после завершения обучения в прошедшем учебном году | 0,09 |
Численность иностранных ППС | 0,02 |
МЕСТО РХТУ В ОБЩЕМ РАНЖИРОВАНИИ ВУЗОВ
В общем ранжировании из 103 вузов РХТУ занимает 21 место. По стобалльной шкале из 100 возможных баллов вуз набрал 56,3 балла. Наиболее высокие позиции университет имеет по направлениям «Научно-исследовательская деятельность» и «Обучение и преподавание».
Таблица 3. Результаты РХТУ по итогам общего ранжирования вузов
Место вуза | Нормализованный балл вуза по стобалльной шкале | |
Общее ранжирование вузов | ||
4. Общее ранжирование вузов (из 103 вузов, макс 100 балл) | 21 | 56,3 |
5. Общее ранжирование вузов по пяти направлениям деятельности (из 103 вузов): | ||
5.1. Научно-исследовательская деятельность (макс 100 балл) | 15 | 39,5 |
5.2. Обучение и преподавание (макс 100 балл) | 9 | 81,8 |
5.3. Международная деятельность (макс 100 балл) | 42 | 12 |
5.4. Трансфер знаний (макс 100 балл) | 86 | 19 |
5.5. Взаимодействие с регионом (макс 100 балл) | 85 | 37,7 |
6. Общее ранжирование вузов по 13 индикаторам глобальных рейтингов (из 103 вузов, макс 100 балл) | 22 | 33,8 |
Рис. 2. Сравнение РХТУ с другими университетами в общем ранжировании (103 вуза)
По направлению «Обучение и преподавание» вуз набрал 81,8 баллов из 100 возможных.
Высокие значения нормализованного балла присвоены 5 индикаторам:
- «Средний балл ЕГЭ поступивших» (0,74)
- «Доля выпускников, поступивших на программы аспирантуры» (0,68)
- «Доля выпускников, трудоустроившихся в течение 1 года по специальности/ направлению обучения после окончания вуза» (0,66)
- «Доля студентов, получивших престижные стипендии» (0,64)
- «Доля молодых штатных ППС, получивших престижные национальные гранты и премии, от всей численности молодых штатных ППС» (0,63).
Ряд индикаторов направления имеют значения нормализованного балла в пределах от 0,5 до 0,1:
- «Доля программ, на которые были приняты студенты с высоким баллом ЕГЭ» (0,2)
- «Численность аспирантов» (0,17)
- «Количество ППС и НР, защитивших докторские диссертации» (0,14)
- «Количество ППС и НР, защитивших докторские диссертации» (0,14)
- «Соотношение численности студентов и ППС» (0,14)
- «Доля защитившихся аспирантов (до года)» (0,1).
Наименьшее значение нормализованного балла (менее 0,1) у индикаторов:
- «Доля защитившихся аспирантов (до 2 лет)» (0,06)
- «Доля ППС, являющихся действительными членами и членами-корреспондентами РАН» (0,06)
- «Соотношение численности приема студентов магистратуры к численности приема студентов бакалавриата» (0,03)
- «Затраты на оборудование и инфраструктуру (для обеспечения обучения)» (0,02)
- «Количество ППС и НР, награжденных премиями мирового и национального уровня» (0,01)
- «Доля студентов магистратуры, закончивших бакалавриат и/или специалитет в других вузах» (0,01)
- «Доля абитуриентов-победителей Всероссийской олимпиады школьников» (0,007)
- «Средства на подготовку студентов» (0,0005).
Балл РХТУ по направлению «Научно-исследовательская деятельность» составил 39,5.
Высокие значения нормализованного балла имеют индикаторы:
- «Доля доходов от научных исследований» (0,9)
- «Количество цитирований на одну статью в РИНЦ» (0,72)
- «Доля ППС с ученой степенью кандидата и доктора наук» (0,61).
Ряду индикаторов присвоены низкие значения нормализованного балла:
- «Количество цитирований на одного ППС в РИНЦ» (0,24)
- «Количество публикаций на одного ППС в РИНЦ» (0,24)
- «Доля расходов на научные исследования» (0,15)
- «Количество публикаций на одного ППС в Web of Science» (0,12)
- «Сумма российских исследовательских грантов (РГНФ, РФФИ, Фонд Бортника)» (0,12)
- «Количество публикаций на одного ППС в Scopus» (0,09)
- «Количество российских исследовательских грантов (РГНФ, РФФИ, Фонд Бортника)» (0,09)
- «Доля студентов очной формы обучения, участвовавших в НИР» (0,06)
- «Количество цитирований на одну статью в Scopus» (0,003)
- «Количество цитирований на одну статью в Web of Science» (0,003)
- «Количество цитирований на одного ППС в Scopus» (0,001)
- «Количество цитирований на одного ППС в Web of Science» (0,001).
По направлению международная деятельность вуз набрал 12 баллов из 100 возможных.
Индикаторы данного направления имеют низкие значения нормализованного балла:
- «Доля ППС, приглашенных для преподавания в университеты СНГ» (0,1)
- «Доля иностранных студентов в общей численности студентов» (0,09)
- «Доля ППС, приглашенных для преподавания в зарубежные университеты (общая)» (0,09)
- «Доля ППС, приглашенных для преподавания в университеты дальнего зарубежья» (0,09)
- «Количество международных исследовательских грантов» (0,04)
- «Сумма международных исследовательских грантов» (0,04)
- «Доля студентов, прошедших обучение за рубежом» (0,04)
- «Доля аспирантов, участвовавших в зарубежных стажировках» (0,03)
- «Доля студентов, обучающихся по программам, реализуемым совместно с зарубежными партнерами» (0,01)
- «Доля доходов из иностранных источников» (0,002)
- «Численность иностранных ППС» (0,002).
Ряду индикаторов присвоены нулевые значения:
- «Доля учебной нагрузки иностранных ППС в учебной нагрузке штатных ППС» (0)
- «Доля ППС с дипломом/ ученой степенью зарубежного вуза/вузов» (0)
- «Доля программ, реализуемых совместно с зарубежными партнерами» (0).
Балл вуза по направлению «Трансфер знаний» составил 19 баллов из 100 возможных.
Наибольшее значение нормализованного балла 0,28 имеет индикатор «Доля доходов из внебюджетных источников».
Значения остальных индикаторов ниже 0,1 балла:
- «Количество специалистов, прошедших повышение квалификации и/или профессиональную переподготовку в вузе» (0,05)
- «Количество образовательных программ, реализуемых по заказу сторонних организаций» (0,008)
- «Количество поставленных на бухгалтерский учет объектов интеллектуальной собственности» (0,0008).
По направлению «Взаимодействие с регионом» вуз набрал 37,7 баллов.
Высокое значение нормализованного балла имеет индикатор «Процент выпускников, работающих в регионе» (0,7). Значения остальных индикаторов ниже:
- «Доля студентов, прошедших практику в региональных организациях и предприятиях» (0,12)
- «Количество договоров на исследования, заключенных с региональными партнерами» (0,08)
- «Доля доходов вуза из региональных источников» (0,035).
МЕСТО РХТУ В ОБЩЕМ РАНЖИРОВАНИИ ВУЗОВ ПО 13 ИНДИКАТОРАМ ГЛОБАЛЬНЫХ РЕЙТИНГОВ
В ранжировании по 13 индикаторам глобальных рейтингов среди 103 вузов РХТУ занимает 22 место. По стобалльной шкале из 100 возможных баллов вуз набрал 33,8.
Таблица 4. Нормализованные баллы РХТУ по 13 индикаторам глобальных рейтингов при общем ранжировании вузов
Индикаторы глобальных рейтингов | Нормализованный балл |
Доля доходов от научных исследований | 0,9 |
Доля доходов из внебюджетных источников | 0,28 |
Соотношение численности студентов и ППС | 0,14 |
Количество публикаций на одного ППС в Web of Science | 0,13 |
Доля защитившихся аспирантов (до года) | 0,1 |
Доля иностранных студентов в общей численности студентов | 0,09 |
Количество публикаций на одного ППС в Scopus | 0,09 |
Доля защитившихся аспирантов (до 2 лет) | 0,06 |
Доля доходов вуза из региональных источников | 0,03 |
Количество цитирований на одну статью в Web of Science | 0,003 |
Количество цитирований на одну статью в Scopus | 0,003 |
Численность иностранных ППС | 0,002 |
Количество цитирований на одного ППС в Web of Science | 0,001 |
ВЫВОДЫ
РХТУ может успешно конкурировать с другими вузами по направлениям «Научно-исследовательская деятельность» и «Обучение и преподавание».
Как в общем ранжировании, так и в ранжировании группы университетов «Другие» у РХТУ
- «Средний балл ЕГЭ поступивших»
- «Доля выпускников, поступивших на программы аспирантуры»
- «Доля выпускников, трудоустроившихся в течение 1 года по специальности/ направлению обучения после окончания вуза»
- «Доля студентов, получивших престижные стипендии»
- «Доля молодых штатных ППС, получивших престижные национальные гранты и премии, от всей численности молодых штатных ППС»
- «Доля доходов от научных исследований»
- «Количество цитирований на одну статью в РИНЦ»
- «Доля ППС с ученой степенью кандидата и доктора наук».
Однако, если в ранжировании вузов «Другие» университет демонстрирует высокие показатели публикационной активности цитируемости, то в общем ранжировании эти показатели снижаются. Это говори о том, что для укрепления своих позиций по направлению «Научно-исследовательская деятельность» университету необходимо повысить эти показатели.
По направлению «Обучение и преподавание» для улучшения позиций в общем ранжировании вузу необходимо повысить показатели эффективности магистратуры.
Как в общем ранжировании, так в ранжировании 103 вузов у РХТУ не очень высокие позиции по направлениям «Трансфер знаний» и «Взаимодействие с регионом». Университет может усилить эти позиции за счет расширения партнерств с внешними организациями, усиления коммерциализации результатов научно-исследовательской деятельности.
Не очень высокие показатели «Международной деятельности» не позволяют университету занять более высокие позиции в ранжированиях по 13 индикатором глобальных рейтингов. Вуз может улучшить эти показатели за счет привлечения большего количества иностранных студентов и преподавателей.
[1] Для целей апробации модельной методологии ранжирования вузы, принявшие участие в обследовании, были отнесены в одну из четырех (условных) групп: 0 – другие вузы, 1 – федеральные университеты, 2 – национальные исследовательские университеты, 3 – университеты победители конкурса программ стратегического развития Министерства образования и науки РФ.
[2] Данная категория представлена вузами, не имеющими статус федеральных, не являющихся НИУ и не являющихся победителями конкурса программ стратегического развития Министерства образования и науки РФ. В рамках данного рейтинга в категорию «другие вузы» включено 38 наименований.
[3] Нормирование – это операция приведения данных к безразмерному виду, иными словами – к единому диапазону, при котором возможно сравнение различных видов данных. Так как суб-индикаторы оценивают различные области деятельности высших учебных заведений, следовательно, они выражены в различных единицах измерения: количество человек, штуки, часы, единицы, баллы, тысячи рублей. Для построения агрегированного показателя, который включат в себя данные различного типа, все суб-индикаторы приведены к единому диапазону – проведено нормирование данных. В частности нормирование данных является первым шагом при построении ранжирования и рейтинга, так как эти инструменты предполагают агрегирование различных суб-индикаторов для получения единой оценки.
[4] При нормировании значений отдельных индикаторов внутри направлений применена шкала от 0 до 1,где интервалы от 0 до 0,1 интерпретируются как наименьшие значения, от 0,1 до 0,5 – низкие значения, от 0,5 до 1 – высокие значения нормализованного балла индикаторов.
