Проект "5-100": оценка его воздействия на публикационную активность университета

В последние десятилетия национальная и международная конкуренция высших учебных заведений значительно возросла, и не только потому, что усилилась глобализация, но и потому, что современные университеты стали рыночно ориен-тированными, изменились требования к качеству образования и экономические условия деятельное -ти [1]. Университеты все чаще сталкиваются с давлением со стороны стейкхолдеров (государственных органов, бизнеса, студентов) и вынуждены демонстрировать им свою эффективность. Тенденция к сравнению вузов на основе разнообразных пока -зателей привела к появлению глобальных рейтин-гов университетов, таких как Academic Ranking of World Universities (ARWU Shanghai Jiao Tong University), Top University Rankings Quacquarelli Symonds (QS), World University Ranking Times Higher Education (THE) [2, 3]. Признание того, что международная конкурентоспособность и эко -номический рост все больше и больше обуслав-ливаются накоплением человеческого капита-ла и что университеты могут играть ключевую роль в этом контексте [4, 5], побуждает государства разрабатывать различные программы и ини-циативы по реструктуризации национальных сис-тем высшего образования, драйвером развития которых должны стать университеты мирового класса [6-8]. Ключевыми атрибутами университетов мирового класса, отличающими их от обычных университетов, являются: высокая концентрация талантов (и преподавателей, и студентов); превосходство в исследованиях, которые признаются коллегами и раздвигают границы знания; значительные ресурсы (высокий уровень государственного и негосударственного финансирова-ния); академическая свобода и автономное управление (для поощрения стратегического видения и инноваций) [9]. Научно-исследовательская деятельность университета становится определяющей в достижении задачи глобального его позициони-рования и узнаваемости в мире [10]. Именно поэтому почти все правительственные инициативы, различаясь по срокам и объемам финансирования, направлены на повышение публикационной актив -ности вузов [11].

Инициативы создания университетов с международным статусом в России не новы. Поступательные реформы Министерства образова-ния и науки РФ были направлены на создание фе-деральных университетов, выделение национальных исследовательских университетов и, наконец, университетов мирового класса. Проект «5-100», цель которого - обеспечить к 2020 году вхождение не менее пяти отечественных университетов в первую сотню ведущих мировых вузов соглас-но рейтингам ARWU, QS или THE, был инициирован в 2012 году как инструмент выполнения Указа Президента Российской Федерации от 7 мая 2012 года № 599 «О мерах по реализации государственной политики в области образования и нау-ки»к По результатам открытого конкурса в 2013 году были отобраны 15 университетов2, а в 2015 году к ним присоединились еще 6 вузов3, в том числе и Тюменский государственный университет.

На достижение целей проекта было выде-лено беспрецедентное для сферы отечественно -го высшего образования финансирование - более 70 млрд рублей (1,13 млрд евро) за период с 2013 года по 2019 год включительно. Размер финансирования каждого вуза - участника «Проекта 5-100» определялся на конкурсной основе ежегодно в зависимости от достижения таких показате-лей эффективности, как4:

• -    позиция в ведущих мировых рейтингах (общая и предметная);

• -    количество публикаций всех типов в научных базах данных (БД) Web of Science и Scopus (исключая дублирование) на одного научно -педагогического работника (НПР) за три предыдущих года включая отчетный год;

• -    средний показатель цитируемости на 1 НПР, рассчитанный по совокупности публикаций в БД Web of Science и Scopus за пять предыдущих лет включая отчетный год;

• -    доля зарубежных преподавателей и исследователей в общей численности НПР включая граж-дан России, имеющих степень PhD зарубежных университетов;

• -    доля иностранных студентов в общей численности обучающихся;

• -    средний балл ЕГЭ студентов вуза, принятых для обучения в очной форме за счет средств фе-дерального бюджета по программам бакалавриа-та и специалитета;

• -    доля доходов из внебюджетных источников в структуре доходов вуза;

• -    численность аспирантов, обучающихся по очной форме обучения, в расчете на 100 студентов , обучающихся по основным образовательным программам высшего образования;

• -    доля публикаций, выполненных в международной коллаборации;

• -    объем НИОКР в расчете на 1 НПР.

И хотя формальная цель проекта уже вы -полнена (пять российских университетов вошли в топ-100 мировых предметных рейтингов), вопрос эффективности использования предостав-ляемых правительством ресурсов остается очень противоречивым.

Страны, принявшие программы продвижения университетов мирового уровня, добились ощутимых успехов в быстром увеличении публикационной активности сотрудников целе-вых университетов. Тем не менее исследований, оценивающих эффект от таких программ, проведено сравнительно мало. В одном из первых исследований использовался метод прерванного временного ряда (interrupted time-series design) для сравнения публикационной активности юж -но-корейских университетов до и после их участия в программе Brain Korea 21 (ВК 21) [12]. Поскольку к указанной программе присоеди-нились все исследовательские университеты Южной Кореи, в контрольную группу были включены университеты из США, Японии и Китая. Результаты исследования показали, что программа ВК 21 позволила укрепить позиции исследовательских университетов внутри страны, однако она не помогла корейским вузам конкуриро-вать с ведущими глобальными университетами. Согласно результатам исследования влияния ки-тайского Проекта 985 на публикационную активность 24 университетов-участников его реализация привела к росту публикационной активности данных вузов в международных журналах, однако сам показатель роста варьировался в широких пределах [13]. Аналогичные результаты были получены при применении метода разности разнос -тей (difference-in-difference) для сравнения участников Проекта 985 с участниками Проекта 211 [14]. Оценка воздействия на публикационную актив -ность университетов программы World Class University Project в Тайване привела к неожиданным результатам: в контрольной группе число опубликованных научных статей увеличивалось более быстрыми темпами, чем в группе воздействия , состоящей из вузов, получающих в рамках данной программы значительное финансирова-ние [11]. Библиометрический анализ свидетельствовал о положительном влиянии программы German Excellence Initiative на публикационную активность немецких университетов [15].

Исследования, проведенные в России, показывают , что не существует единых методов оценки воздействия программ в сфере высше-го образования и науки на показатели деятель -ности университетов - участников этих программ . Сравнение темпов роста общего числа публикаций в БД Scopus и их цитируемости у университетов - участников Проекта «5-100» и университетов контрольной группы до и после 2013 года выявило положительное воздействие данного проекта на публикационную активность вузов [16]. Часто результаты Проекта «5-100» оцениваются лишь применительно к его участ-никам. Так, исследование [17] классифицирует паттерны развития вузов - участников Проекта «5-100», а в работе [18] дается анализ проиндексированных в БД Scopus российских публикаций за 2010-2016 годы, имеющих хотя бы одну аффилиацию вуза из Проекта «5-100», и классифицируются стратегии повышения публикационной ак-тивности участников данного проекта. Наличие, однако, большого числа факторов, оказывающих влияние на публикационную активность россий-ских университетов, снижает объективность таких описательных оценок.

Квазиэкспериментальный дизайн исследо-ваний позволяет учитывать при анализе резуль -татов Проекта «5-100» влияние сопутствующих переменных [19, 20]. Благодаря применению метода разности разностей при анализе данных за 2010-2015 годы доказано значимое положительное воздействие Проекта «5-100» на количество и качество публикаций уже в первые годы его реализации [19]. Тем не менее в данной работе не учитывалась разнородность вузов по объему и значимости получаемого в рамках проекта фи -нансирования, а также не отделялся эффект воздействия Проекта «5-100» от эффекта воздействия других программ, в которых университеты принимали одновременное участие, например в конкурсе мегагрантов по Постановлению № 2205.

Еще одна проблема в оценке воздействия Проекта «5-100» на публикационную активность участников первой волны его реализации состо-ит в том, что отобранные вузы являлись лучшими исследовательскими университетами в стра-не, и поэтому даже в отсутствие Проекта «5-100» можно было ожидать, что их публикационная активность будет выше. Оценка воздействия данного проекта на публикационную активность вуза второй волны, а именно Тюменского государственного университета, позволит устранить такие различия, поскольку на начало 2015 года ТюмГУ был региональным университетом, который выживал, а не развивался6. Исследование влияния Проекта «5-100» на публикационную активность отдельного его участника, причем участника второй волны, проводится впервые.

Гипотеза исследования заключалась в том, что между количеством опубликованных сотрудниками ТюмГУ статей и участием вуза в Проекте «5-100» наблюдается положительная причинно-следственная связь, при этом наибольшее воздействие участие в Проекте «5-100» оказывает на размещение статей в журналах первого и второго квартиля. Поскольку в нашем исследовании ТюмГУ рассмат-ривался как единственный университет - участник Проекта «5-100», для проверки данной гипотезы был проведен эксперимент, в котором ТюмГУ выступал объектом воздействия, а группа других вузов использовалась в качестве контрольной.

ТюмГУ: опыт участия в Проекте «5-100»

Как и большинство других классических уни-верситетов России, ТюмГУ следовал традиционной модели, где преподавание было основной миссией, а исследования выполняли в деятельности вуза роль второстепенную [21]. В 2013 году ТюмГУ решается на проведение качественной трансформации, чтобы перейти из разряда региональных университетов в разряд лидеров нацио-нальной системы высшего образования и одновре-менно занять устойчивую позицию на междуна-родном рынке исследований [22].

В октябре 2015 года ТюмГУ становится участником Проекта «5-100» второй волны. Предпосылками для успешной защиты дорож-ной карты по повышению конкурентоспособное -ти и, как следствие, инициации финансирования выступили следующие факторы:

• -    поддержка проекта губернатором Тюменской области⁷ и главами ведущих российских компаний , их готовность финансировать реализацию отдельных мероприятий программы развития;

• -    наличие в университете исследовательских групп мирового уровня по нескольким направле-ниям (акарология, фотоника, качество пресных вод и композитные материалы);

• -    наличие молодой управленческой команды ректора, нацеленной на глубокие преобразования в университете;

• -    высокая доля доходов университета (69 %) из внебюджетных источников.

ТюмГУ ставит перед собой стратегическую цель стать университетом нового поколения на ос -нове трансформации кадровой политики, базовых видов деятельности (образовательной, исследовательской , инновационной), институциональной среды и опережающего обновления инфраструктуры.

Точками роста для университета с 2015 года выступали стратегические академические едини -цы (САЕ), созданные по Проекту «5-100»: Школа перспективных исследований (SAS) и Институт экологической и сельскохозяйственной биоло -гии (X-BIO). В SAS удалось привлечь команду преподавателей и исследователей - выпускников PhD-программ лучших вузов мира, входящих в топ-100 глобальных рейтингов. X-BIO обеспечивает целенаправленную концентрацию ресурсов по естественно-научным и инженерным направлениям в области экологической и сельскохозяй-ственной биологии, SAS - по социальным и гуманитарным наукам. Принципами работы CAE выступают междисциплинарность и высокий уро -вень стандартов исследований: публикации в журналах первого и второго квартиля, участие в проектах по грантам международных и федеральных фондов в тесной коллаборации с ведущими оте-чественными и зарубежными научными центрами.

За период с 2014 года по 2019 год включительно университету удалось добиться значимых ре -зультатов в приоритетных направлениях научных исследований и существенно усилить публика -ционную активность сотрудников.

В ТюмГУ возросли следующие ключевые по -казатели публикационной активности:

• -    общее количество цитирований в БД Scopus (с 383 в 2013 году до 1304 в 2017 году);

• -    взвешенное по области знания цитирование (Field-Weighted Citation Impact) (с 0,69 до 1,04);

• -    число опубликованных статей в индексируемых БД Scopus изданиях (с 98 до 332);

• -    число опубликованных статей в топ-25 % по SJR журналах (с 5 до 83);

• -    число публикаций в топ-10 %о наиболее цитируемых публикаций в мире (с 5 до 34);

• -    число статей в журналах, которые входят в первый или второй квартиль (Q1 или Q2) в БД Web of Science (с 23 до 108);

• -    число публикаций в научных журналах из Nature Index (с 0 до 23).

В 2020 году, имея в своем арсенале не менее 150 индексируемых в БД Scopus публикаций за пять предыдущих лет, ТюмГУ претендует впервые попасть в общий глобальный рей -тинг университетов по версии THE (Times Higher

На рис. 1 и 2 представлены динамика и структура публикационной активности ТюмГУ в БД Web of Science и Scopus за период с 2000 года по 2019 год включительно. Как следует из приведенных данных, повышается и общее количество публикаций, и их качество. Количество статей первого квартиля увеличивается и в абсолютном, и в относительном выражении. Публикационная активность ТюмГУ начали расти и до его участия в Проекте «5-100», уже с 2013 года, что может объясняться усилением требований к публикацион-ной активности университетов на федеральном уровне, а также подготовкой к конкурсному отбору в данный проект.

Начиная с 2016 года стала увеличиваться доля публикаций в сборниках конференций (особенно российских и заочных) и в журналах без импакт-фактора (преимущественно индексируемых в Emerging SCI). В 2016-2018 годах на долю таких работ приходилось больше половины ну б -ликаций ТюмГУ в БД Web of Science. Многие статьи были опубликованы по стратегии привле-ченного автора, то есть авторы публикаций имели внешнюю аффилиацию до участия ТюмГУ в Проекте «5-100» [18]. Статьи в журналах первого квартиля есть лишь у нескольких исследова-тельских групп по ограниченному числу направ-лений (акарология, фотоника, качество пресных вод, композитные материалы). В публикационной активности университета наблюдается пре -обладание работ по сельскохозяйственным и био -логическим наукам: из 802 статей в БД Web of Science за 2014-2019 годы 422 статьи приходится всего на три области: энтомологию (234 статьи), зоологию (151 статья) и биологию (37 статей). Университет активно привлекает внешних исследователей, быстро наращивая публикационную активность. Так, только в области биологических наук 330 статей, или 78 %о, приходится всего на двух ученых: С. Ермилова (258 статей) и А. Хаустова (96 статей).

С 2014 года ТюмГУ ввел систему стимулирования работников за достигнутые научные ре -зультаты, вследствие чего начало расти количество тезисов и статей, опубликованных в журналах

б

а

Статьи в Q2 WoS СС

Статьи в Emerging SCI

Статьи в Q1 WoS СС

Прочие статьи в WoS СС

Прочие публикации в WoS СС

б

а

Статьи в ведущих 25% по SJR Прочие публикации в Scopus

Статьи в ведущих 10% по SJR Прочие статьи в Scopus

Рис. 2. Общее количество публикаций Тюменского государственного университета, проиндексированных в Scopus (а), и их структура (б)

Fig. 2. Number (a) and structure (b) of Scopus publications of the University of Tyumen

Рис. 1. Общее количество публикаций Тюменского государственного университета, проиндексированных в Web of Science Core Collection (а), и их структура (б)

Fig. 1. Number (a) and structure (b) of WoS publications of the University of Tyumen

без импакт-фактора (см. рис. 1), особенно в «хищнических » (Mediterranean Journal of Social Sciences, Indian Journal of Science and Technology, International Review of Management and Marketing, Man in India и др.). В сентябре 2015 года инструменты стимулирования были скорректированы, однако критерии отнесения того или иного изда-ния к числу «мусорных» отсутствовали, и число публикаций в таких журналах продолжало уве-личиваться. После вхождения в Проект «5-100» ТюмГУ меняет процедуру конкурсного отбора при трудоустройстве, вводит квалификационные требования для сотрудников, а показатели эффективности включает в трудовой договор с каж-дым научно-педагогическим работником. Не имея больше стимулов размещать работы в «хищнических » журналах, сотрудники ТюмГУ начинают публиковать статьи в изданиях «невысокого качества, характеризующихся быстрым публикационным циклом и относительно низкими требо-ваниями к принимаемым для публикации руко-писям» [19, 20]. В конце 2018 года политика стимулирования публикационной активности вновь меняется. С этого времени в университете действует квалификационная надбавка - ежемесячная фиксированная надбавка в зависимости от со -ответствия установленным в университете специ-альным требованиям.

Методология исследования

В настоящем исследовании используют -ся материалы открытых ресурсов и баз данных. Панельные данные агрегированы из двух источ-ников, связанных с входными (независимыми) и выходными (зависимыми) переменными, охватывающими 32 университета за период с 2013 года по 2017 год включительно. В качестве показателей публикационной активности универси-тетов принято использовать такие индикаторы, как общее количество всех публикаций; число опубликованных статей (только тип документа article); число высокоцитируемых публикаций; число (доля) публикаций в научных журналах уровня Q0, Nature Index; число цитирований для всех публикаций и отдельно - для статей (тип документа article); взвешенное по области знания цитирование (Field-Weighted Citation Impact) [16]. Публикационная активность университета в на -шем исследовании измерялась количеством ста -тей (тип документа article), опубликованных сотрудниками университета в календарном году и проиндексированных в библиографической ба -зе Web of Science Core Collection. При этом следует отметить, что поскольку у журналов, входящих только в Arts and Humanities Citation Index или Emerging Sources Citation Index, нет импакт-факторов и квартилей, список данных периодических изданий был ограничен лишь теми, которые индексируются в Science Citation Index Expanded и Social Sciences Citation Index. Используется полный метод подсчета публикаций, когда каждой организации , упомянутой в списке аффилиаций той или иной статьи, статья засчитывается полностью, вне зависимости от общего числа аффилиаций [19].

Как показатель качества публикаций исполь-зовалось число статей, размещенных в журналах первого и второго квартиля (Q1 и Q2), под которыми в данном случае понимаются журналы, входящие в верхние квартили по величине импакт-фактора Thomson Reuters 2018 года хотя бы в одной из предметных областей.

В качестве стандартных предикторов науч -но -исследовательской деятельности университета в литературе используются такие показатели, как число НПР, число аспирантов, число иностранных студентов, финансирование НИР и др. [14]. Данные об объеме научно-исследовательских и опытно-конструкторских работ, общей численности ППС (без внешних совместителей и работающих по договорам ГПХ)8, численности аспирантов вуза, а также научно-педагогических работников с научной степенью были получены из информационно-аналитических материалов по результатам проведения мониторинга эффек-тивности деятельности образовательных органи-заций высшего образования России.

Чтобы оценить влияние Проекта «5-100» на университет - его участник, необходимо измерить количество и качество публикаций и этого университета, и вузов, в данном проекте не участвующих. Поскольку невозможно оценить гипотетическую альтернативную ситуа-цию или ситуацию, которая могла бы сложиться при условии неучастия университета в указан -ном проекте, используется статистическая методология , известная как «предположение от обратного » (determining the counterfactual), или контрфактический анализ [24].

Цель контрфактического анализа - выявить причинно-следственную связь между конкретным вмешательством и полученными в результа-те этого вмешательства результатами, используя контрфактические сценарии для оценки количес-тва и качества статей, которые работники ТюмГУ опубликовали бы в отсутствие Проекта «5-100». Для определения гипотетического альтернатив -ного сценария необходимо отделить эффект воз -действия от других факторов. Анализ осуществляется путем выбора групп сравнения, которые не участвуют в проекте «5-100» и обеспечивают подходящие контрфактические исходные условия, представляющие гипотетическую ситуацию без вмешательства данного проекта. Затем контрольная группа сравнивается с группой воздействия.

Рассматриваются два контрфактических сценария. В первом сценарии применяется метод регрессии с переключением режимов, предложенный в работе [25]. Во втором сценария используются методы синтетической контрольной группы [26].

В первом контрфактическом анализе чис-ло статей в БД Web of Science, которые были бы опубликованы ТюмГУ, если бы он не участвовал в Проекте «5-100», оценивается как предполагаемое с учетом тренда публикационной ак-тивности и поправки на изменение, произошедшее после 2015 года и связанное с факторами вне Проекта «5-100» (с бумом в России публикационной активности [27], с ростом доходов в Тюменской области и др.). Поправка на изменение тренда рассчитывается по изменению пуб -ликационной активности Тюменского индустри-ального университета (далее - ТИУ). Во-первых, ТИУ тоже расположен в Тюмени, поэтому он может быть подвержен влиянию тех же самых внут-рирегиональных факторов (рост доходов населения , изменения в демографической структуре), что и ТюмГУ. Во-вторых, оба университета на начало участия ТюмГУ в Проекте «5-100» были сопоставимы между собой по ключевым показате-лям развития, таким как численность работников и объем расходов на НИОКР. Хотя ТИУ формально и относится к группе технических университе-тов, в анализируемый период он осуществлял подготовку кадров в области социальных и гумани-тарных наук, экономики и управления.

Для составления прогнозов используется еле -дующее уравнение:

I«( Y) = Д + Д/геи^т £„ (1)

где Р о и 1- - константа и коэффициенты регрессии ; I«(Y_t) - натуральный логарифм числа статей в ТюмГУ в году, t; trend - линейный тренд; е, - ошибка.

Затем применяется та же процедура, но с использованием данных ТИУ, позволяющая

получить прогнозы соответствующего коли -чества публикаций за тот же период времени. Вышеупомянутая корректировка изменения трен -да рассчитывается для каждого года (с 2015-го по 2019-й включительно) следующим образом:

A

(ObservedTIU)

)- i±(Y

(ProjectedTIU))

A(^TIU} - коррекция на изменение тренда; I„(yt^(ObservedT,U’) и In(Y,^(Pr°^ectedTIU)) - натуральные логарифмы наблюдаемого и прогнозируемого количе-ства статей в ТИУ в год t соответственно.

Наконец, предполагаемое влияние Проекта «5-100» на количество публикаций в ТюмГУ в 2015-2019 годах рассчитывается как разница между наблюдаемым числом публикаций в ТюмГУ и прогнозируемыми значениями (включая корректировку) следующим образом:

ObservedUI TIU ProjectedUT z^x

Impact_t = Y_t - (1 + A, )xY_t° , (3) где Yt^ObserredUT - наблюдаемое количество статей в ТюмГУ в году t; Y^p’°^oectt“^dUT - прогнозируемое количество статей в ТюмГУ в году t, полученное из (1); А™ - коррекция на изменение тренда, полученная в (2).

Первый сценарий не учитывает проблему на -личия потенциальных побочных эффектов, возникающих , когда контрольная группа тоже может косвенно подвергаться воздействию. Например, участие ТюмГУ в Проекте «5-100» могло повлиять на ТИУ. Подтверждением наличия положительного косвенного эффекта выступает рост научной коллаборации университетов, что проявляется в повышении числа совместно опуб-ликованных статей: в БД Scopus с 5 в 2015 году до 34 в 2017-м, в БД Web of Science (SCI Expanded и SSCI) c 2 в 2015 году до 14 в 2018-м. Таким образом,

A ™ = A, + S^z7/over,TIU, (4)

где A_t - изменение тенденции публикационной активности в ТИУ, которое произойдет без каких-либо побочных эффектов; Spillover™ - побочный эффект, вызванный влиянием возросшей публикационной активности в ТюмГУ.

Чтобы изолировать этот побочный эффект, необходимо сравнить ТюмГУ с университетом, удаленным от Тюмени и при этом не являющим -ся университетом - участником Проекта «5-100». Предполагается, что в этом случае Spillover™ ~ 0. В контексте данного исследования можно выде-лить достаточно много потенциальных универ -ситетов из контрольной группы. Можно использовать стандартный анализ с фиксированными эф -фектами (который фактически предполагает, что

каждый университет одинаково хорош в качес-тве контрольного). Однако здесь может не выполняться условие параллельности трендов до воздей-ствия Проекта «5-100», и такой анализ не позволит дать точную оценку эффекта, производимого данным проектом. Базируясь на методе разности разностей, метод синтетических контрольных групп отходит от использования одной контроль -ной группы или простого среднего значения кон -трольных групп и вместо этого предлагает вы -бор взвешенного среднего потенциальных кон -трольных групп [26]. Другими словами, вместо выбора между Тюменским индустриальным уни-верситетом, Башкирским государственным университетом или, к примеру, Иркутским государственным университетом метод синтетических контрольных групп предполагает выбор веса для каждого из этих трех университетов, чтобы средневзвешенное значение было к ТюмГУ ближе, чем к любому отдельно взятому университету или к простому среднему значению результатов пере -численных вузов.

Применение метода синтетических контроль -ных групп требует определенного алгоритма для выбора весов. В оригинальной работе [26] используется подход с минимальным расстоянием в со -четании с ограничением на то, что полученные веса неотрицательны и в сумме дают единицу. Такой подход часто приводит к уникальному набору ве-сов. Однако если определенный объект находится на краю распределения, то учет весов, которые суммируются до числа, отличного от единицы , или учет отрицательных весов могут подбор улучшить. Эффект от участия в Проекте «5-100» в нашем случае будет оцениваться следующим образом:

^аI/ ^{= У}/ ^_ ^(7=2) ^W ]^У JR (⁵⁾

где Y_i( - исход [общее число статей в журналах с импакт-фактором БД Web of Science (SCI Expanded и SSCI) либо количество статей в журналах первого и второго квартиля] для университета i в период /, так что / е {Т₀ +1,.., Т‘; i = 1 -объект, подверженный воздействию после периода Т₀ (1Т Т₀< Т); 7- возможные контрольные группы, индексируемые как {2, ., 7 +1‘; W,- - неотрицательные веса, в сумме дающие единицу.

Пусть х, - наблюдаемые регрессоры для объекта i (объем НИОКР, общая численность НИР, численность аспирантов, а также доля НИР с научной степенью). Выбор весов происходит таким образом, что в результате минимизируется расстояние между (Уц, Х1) и 5('{:^ь₂'_|Wj(Y_jX,х,), (У2,Х1)иЕ^Д’ w/T^,хД, ., (У1т0, Х1)иS(7=2) w/y_T0,хД.

Оптимальные веса (те, что различаются в зависимости от определения расстояния) дают синтетическую контрольную группу, чьи исходы в период до участия в Проекте «5-100» и регрессоры в период участия в нем наиболее близки [28].

Как указывается в работе [26], даже если существует синтетическая контрольная группа, которая обеспечивает соответствие группе воздей-ствия, смещение оценок может быть большим, если простая линейная модель не распространяется на весь набор контрольных групп в какой-либо конкретной выборке. Для решения этой проблемы можно ограничить пул доноров лишь объектами с характеристиками, аналогичными характеристикам объекта, подверженного воздействию. В качестве критериев для университетов контроль -ной группы использовались схожий с ТюмГУ про -филь (классический университет, значительную часть выпускников которого составляют специа-листы в области естественных, гуманитарных и социально -экономических наук) и сопоставимость по ключевым показателям (число научных статей, объем НИОКР, численность сотрудников). Из документа «Рейтинг востребованности вузов в РФ - 2015: классические университеты» [29] в качестве контрольной группы были выбраны 30 классических университетов.

Описательные статистики

На рис. 3 отражена динамика изменения количества статей, опубликованных сотрудниками ТюмГУ и ТИУ. Оба университета до 2013 года имели низкие показатели публикационной активности. Однако после 2013 года число публикаций стало увеличиваться в каждом из этих уни-верситетов. В качестве причины роста публикационной активности можно предположить жела-пне вузов выполнить требования мониторинга эффективности деятельности организаций выс-шего образования. ТИУ удалось быстро нарастить публикационную активность в индексируе-мых БД Scopus изданиях, но сделано это было за счет прочих публикаций, преимущественно тезисов конференций. Как указывается в работе [18], такая стратегия не может быть достоверным ин -дикатором повышения уровня научных исследо-ваний. Если же отбросить доминирующую стратегию ТИУ, то его результат окажется сопоставимым с результатом ТюмГУ: по общему числу статей только в научных журналах оба универси-тета почти не различаются. Тем не менее и здесь увеличение числа опубликованных сотрудника -ми ТИУ статей происходит в основном за счет их размещения в сегменте низкоцитируемых жур-налов или даже в откровенно недобросовестных, «мусорных» изданиях.

Поскольку рост числа потенциально недоб-росовестных изданий был отмечен прежде все -го в БД Scopus [19], в нашем исследовании под публикационной активностью будут понимать -ся статьи в журналах, индексируемых БД Web of Science и имеющих импакт-фактор. Так, в структуре публикаций ТИУ преобладают тезисы кон -ференций, а также статьи в журналах без импакт-фактора. По статьям только в журналах с им-пакт-фактором (SCI Expanded и SSCI) ТИУ явно уступает ТюмГУ в росте публикационной актив -ности (см. рис. 3). Проект «5-100» эффективно воздействует не только на рост общего числа опубли-кованных статей, но и на улучшение их качества. Так, по числу статей в журналах первого и второго квартиля ТюмГУ значительно опережает ТИУ, и данный разрыв, отмечающийся с 2016 года, продолжает нарастать.

На рис. 4 представлены тренды публикационной активности в ТюмГУ и в контрольной группе университетов; как следует из приведенных данных, эти тренды различаются. Поскольку не выполняется условие параллельности трен -дов до вступления ТюмГУ в Проект «5-100», метод разности разностей не позволяет дать точные и объективные оценки эффекта воздействия это -го проекта.

Поскольку университеты из контрольной группы не обеспечивают подходящих контр -фактических исходных условий, был сформирован синтетический университет, который отражает значения предикторов и результиру-ющих показателей в ТюмГУ перед его входом в Проект «5-100». Синтетический университет построен как средневзвешенное весов потенци-альных университетов с весами контрольными, при этом веса выбираются таким образом, чтобы полученный в результате синтетический универ -ситет наилучшим образом воспроизводил значе-ния набора предикторов и результирующих пока -зателей в ТюмГУ до его входа в Проект «5-100». В табл. 1 приведены описательные статистики этих переменных.

Рис. 3. Количество статей (тип документа article)* в Тюменском государственном университете (ТюмГУ) и Тюменском индустриальном университете (ТИУ): а - статьи в Web of Science (Science Citation Index

Expanded и Social Sciences Citation Index); б - статьи в Scopus

Fig. 3. Publication activity of the University of Tyumen (UT) and Tyumen Industrial University (TIU): a - WoS publications (Science Citation Index Expanded and Social Sciences Citation Index); b- Scopus publications

* Мы учитываем лишь количество статей (только тип документа article), опубликованных сотрудниками университетов в календарном году и проиндексированных в БД Web of Science Core Collection или БД Scopus. Список журналов БД Web of Science ограничен лишь индексируемыми в Science Citation Index Expanded и Social Sciences Citation Index.

Table 1

Переменная	ТюмГУ			Среднее значение для 31 университета контрольной группы
	реальный	синтетический
		(1)	(2)
Общий объем научно-исследовательских и опытноконструкторских работ, тыс. руб.	167 711,4	167 607,8	168 444,5	187 264,7
Численность аспирантов вуза в расчете на 100 студентов (приведенного контингента), чел.	4,50	4,50	4,50	3,99
Общая численность ППС (без внешних совместителей и работающих по договорам ГПХ), чел.	856,0	856,6	859,1	946,7
Удельный вес НПР, имеющих ученую степень кандидата и доктора наук, в общей численности ППС вуза, %	69,0	69,0	69,3	81,6
Количество статей в 2013 году, ед.	45,00	50,30	-	49,29
Количество статей в 2014 году, ед.	67,0	58,7	-	55,7
Количество статей в 2015 году, ед.	105,0	94,0	-	90,2
Количество статей Q1 и Q2 в 2013 году, ед.	5, 00		9,86	14,70
Количество статей Q1 и Q2 в 2014 году, ед.	11, 00		12,57	15,00
Количество статей Q1 и Q2 в 2015 году, ед.	20,0		20,4	21,1