Динамика показателей диссертационных советов при реализации мероприятий дорожной карты

Ученая степень кандидата и доктора наук, решение о присуждении которой принимает диссертационный совет (ДС)1, является показателем наивысшего уровня научной квалификации в выбранной предметной области [1]. В связи с этим важнейшее значение имеет вопрос о качестве работы ДС [2], обоснованности и объективности его решений [3].

Целевые индикаторы результативности ДС были определены решением пленума Высшей аттестационной комиссии (ВАК) при Министерстве науки и высшего образования Российской Федерации (Минобрнауки России) 03 июня 2015 г.2 с учетом рекомендаций экспертных советов ВАК и рабочих групп Минобрнауки России, во исполнение поручений, данных Председателем Правительства РФ Дмитрием Медведевым по итогам совещания по эффективности деятельности государственной системы научной аттестации [4].

Эти индикаторы легли в основу утвержденного Минобрнауки России 23 августа 2016 г. Плана мероприятий (дорожная карта)3 по оптимизации советов по защите диссертаций на соискание ученой степени кандидата наук, на соискание ученой степени доктора наук. Целью дорожной карты является дальнейшее повышение качества экспертизы результатов диссертационных исследований за счет трансформации сети ДС на основе оценки показателей их научного и кадрового потенциала.

Дорожной картой ставится задача поэтапного и вариативного (для различных групп научных специальностей) достижения к 31 декабря 2018 г. соответствия критериям ВАК при Минобрнауки России показателей результативности научной деятельности для организаций, на базе которых созданы (ДС), на 100 %, а для членов диссертационных советов (ЧДС) не менее чем на 90 %.

Сведения об организациях и ЧДС, представленные в ежегодных отчетах о работе ДС4

за 2015–2018 гг., позволяют оценить ход поэтапного достижения целевых индикаторов в сроки, обозначенные в Плане мероприятий (дорожная карта).

Вопросы совершенствования системы аттестации научных и научно-педагогических кадров за время реализации мероприятий дорожной карты рассматривались исследователями как с общеконцептуальных позиций [5–7], так и с детализацией проблематики по присуждаемым отраслям науки: юридическим [8, 9], педагогическим [10], философским [11], сельскохозяйственным [12], техническим [13] и другим. Авторы этих работ отмечают, что повышение требований ВАК при Минобрнауки России вызвало сокращение количества ДС и числа защищенных диссертаций. Эти меры позволили повысить качество диссертационных работ и профессионализм молодых специалистов в каждой области науки. В то же время ряд других авторов [14–16] полагает, что результаты реализации мероприятий дорожной карты в значительной мере носят формальный характер и не обеспечивают качественного улучшения российской системы государственной аттестации. Этот тезис находится в противоречии с привлекательностью для граждан иностранных государств проведения диссертационных исследований в российских университетах и защиты в них диссертаций на соискание ученой степени кандидата и доктора наук [17–19].

При этом детального анализа динамики показателей деятельности ДС за период реализации дорожной карты до настоящего времени не было. Целью настоящей статьи как раз и является анализ фактического состояния степени соответствия организаций, на базе которых действуют ДС, и ЧДС критериальным требованиям, предъявляемым ВАК к показателям результативности научной и публикационной деятельности, определенным дорожной картой.

Вариативные сценарии в методике оценки степени соответствия ЧДС

В соответствии с решением пленума ВАК при Минобрнауки России для ЧДС было выбрано два пороговых показателя. Первый показатель был общим для всех групп научных специальностей и определял число публикаций ЧДС за предшествующие пять лет в журналах, входящих в Перечень рецензируемых научных изданий, в которых должны быть опубликованы основные научные результаты диссертаций на соискание ученой степени кандидата наук, на соис- кание ученой степени доктора наук. Второй показатель различался для разных групп научных специальностей. Для групп научных специальностей, относящихся к естественным, медицинским, сельскохозяйственным и техническим областям науки, второй показатель определял число публикаций ЧДС за предшествующие пять лет в журналах, индексируемых в международных системах цитирования (библиографических базах) (Web of Science, Scopus и пр.). Для групп научных специальностей, относящихся к гуманитарным и общественным, педагогическим и экономическим областям науки, второй показатель определял число опубликованных рецензируемых монографий.

При сравнении фактически достигнутых результатов публикационной деятельности ЧДС и плановых целевых индикаторов возможны три вариативных сценария расчета степени интегрального соответствия ЧДС:

• 1.    Ступенчатый – («жесткий») сценарий, при котором степень соответствия публикационной активности каждого ЧДС критериальным требованиям определяется равной «1» только при выполнении всех установленных целевых индикаторов, то есть все достигнутые ЧДС показатели по публикациям больше пороговых значений или равны им. Если хотя бы один из двух показателей публикационной активности не достигнут, то степень соответствия ЧДС считается равной «0».

• 2.    Дробный с учетом ступенчатости каждого показателя – («средний») сценарий, при котором степень соответствия публикационной активности каждого ЧДС критериальным требованиям может быть равной «0», «0,5» или «1» в зависимости от числа достигнутых пороговых показателей. Таким образом, если ЧДС достиг только одного из двух показателей по публикациям, то степень его соответствия считается равной «0,5».

• 3.    Дробный с дробностью внутри показателя – («мягкий») сценарий, при котором степень соответствия публикационной активности каждого ЧДС критериальным требованиям определяется отношением опубликованных ЧДС научных статей и монографий к заданному (пороговому) числу научных статей и монографий.

Пример расчета степени соответствия ЧДС с различными показателями публикационной активности, для групп научных специальностей, отнесенных к естественным, медицинским, сельскохозяйственным или техническим областям науки, по трем вариативным сценариям представлен в табл. 1.

Таблица 1

Показатели степени соответствия ЧДС критериальным требованиям

ВАК, рассчитанные по трем вариативным сценариям

Table 1

Compliance degree indicators of the dissertation council members to the Higher Attestation Commission requirements according to three variable scenarios

ЧДС	Достигнутый показатель		Критерии соответствия ВАК по публикациям		Значение степени соответствия ЧДС для различных вариативных сценариев
	WoS/ Scopus	ВАК	WoS/ Scopus	ВАК	Ступенчатый (0;1) «жесткий»	Дробный с учетом ступенчатости каждого показателя « средни й»	Дробный с дробностью внутри показателя « мягкий »
ЧДС 1	4	6			1	1	1
ЧДС 2	2	5	3	5	0	0,5	0,83
ЧДС 3	1	3			0	0	0,46
ЧДС 4	0	1			0	0	0,1

Пример расчета степени соответствия ЧДС 2 для различных сценариев более наглядно иллюстрирует порядок формирования интегральной степени соответствия каждого ЧДС:

Для столбца «жесткий» сценарий:

((2<=3) * (5<=5)) = (0 * 1) = 0

Для столбца «средний» сценарий:

((2<=3) + (5<=5))/2 = (0 + 1)/2 = 0,5

Для столбца «мягкий» сценарий:

((2/3) + (5/5))/2 = (0,66 + 1)/2 = 0,83

Информация из отчетов о деятельности сети ДС позволяет сформировать интегральную степень соответствия ЧДС критериальным требованиям ВАК для всей сети диссертационных советов в динамике за 2015–2018 гг. по каждому из описанных сценариев. В табл. 2 представлены результаты этого расчета.

Результаты, представленные в табл. 2, показывают, что вне зависимости от выбора сценария расчета наблюдается положительная динамика показателей степени соответствия ЧДС критериальным требованиям ВАК. В 2015 г. показатели соответствия ЧДС критериям по публикациям, рассчитанные по варианту 1 и варианту 3, отличались в 1,5 раза. Те же показатели в 2018 г.-только в 1,1 раза.

ВАК при Минобрнауки России в практической деятельности при рассмотрении ходатайств организаций об открытии ДС5 использует «жесткий» сценарий расчета степени соответствия ЧДС.

Таблица 2

Показатели степени соответствия ЧДС критериальным требованиям ВАК для всей сети ДС за 2015–2018 гг. по различным вариативным сценариям

Table 2

Compliance degree indicators of the dissertation councils members to the Higher Attestation Commission requirements for the entire dissertation councils network in 2015–2018 according to various variable scenarios

	Степень соответствия ЧДС критериальным требованиям ВАК
	сценарий 1 «жесткий»	сценарий 2 «средний»	сценарий 3 «мягкий»
2018 год	82,7 %	88,5 %	92,1 %
2017 год	69,0 %	79,2 %	85,2 %
2016 год	64,8 %	77,0 %	83,0 %
2015 год	49,9 %	66,8 %	73,6 %

Таким образом, в дальнейшем для анализа фактического состояния степени соответствия научной и публикационной деятельности ЧДС критериальным требованиям ВАК использовался «жесткий» сценарий расчета. Так, значение степени соответствия публикационной активности каждого ЧДС критериальным требованиям ВАК определялось равным «1» только при выполнении всех установленных целевых индикаторов, то есть все достигнутые ЧДС показатели по публикациям больше или равны пороговых значений. Если же хотя бы один из двух показателей результативности ЧДС был не достигнут, то степень соответствия публикационной активности этого ЧДС критериальным требованиям считалась равной «0».

Среднее значение степеней соответствия всех ЧДС формирует значение средней степени соответствия всего ДС критериям, предъявляемым к ЧДС с учетом группы научной специальности, представляемой им в этом совете.

Динамика показателей соответствия ЧДС

Анализ данных о деятельности ДС за 2015– 2018 гг. [20], свидетельствует о росте показателей результативности научной и публикационной деятельности ЧДС. При сокращении числа действующих ДС и, соответственно, ЧДС за четырехлетний период произошел рост степени соответствия ЧДС критериальным требованиям ВАК. Так, число ДС и число ЧДС сократилось на 20 %, а степень их соответствия критериальным требованиям ВАК по публикациям возросла в 1,7 раза.

На рис. 1 представлена динамика количества ЧДС и степени их соответствия критериальным требованиям в 2015–2018 гг.

Распределение ДС по уровням соответствия критериальным требованиям к ЧДС показывает рост числа советов, полностью (на 100 %) соответствующих критериям. Этот рост произошел со 115 советов (3 % общего числа ДС) в 2015 г. до 662 советов (24 % от общего числа ДС) в 2018 г. В то же время число ДС, соответствующих критериальным требованиям на уровне менее 35 %, уменьшилось с 1202 советов (34 % общего числа ДС) в 2015 г. до 57 ДС (2 % общего числа ДС) в 2018 г.

На рис. 2 приведена сравнительная динамика распределения числа ДС по уровням соответствия критериальным требованиям, предъявляемым к публикационной активности ЧДС за 2015 и 2018 г.

Как видно из показателей, представленных на рис. 2, динамика положительная – в 2018 г. отмечается существенное перераспределение ДС в лучшую сторону по группам степени соответствия. Одним из факторов, положительно сказавшихся на такой динамике, стало сокращение на 20 % общего числа ДС и ЧДС в 2018 г. по сравнению с 2015 г. При этом необходимо отметить, что количество советов, соответствующих критериальным требованиям более чем на 90 %, выросло в 4 раза (c 286 ДС в 2015 г. до 1219 ДС в 2018 г.), что может быть связано только с ростом показателей публикационной активности каждого ЧДС.

Согласно критериальным требованиям ВАК при Минобрнауки России, к ЧДС предъявляются количественные требования к показателям публикационной активности за предшествующий пятилетний период: в журналах, индексируемых в международных базах данных, в журналах из перечня ВАК и по рецензируемым монографиям.

На рис. 3 приведена четырехлетняя динамика показателей публикационной активности ЧДС, где

Количество членов диссертационных советов/ Dissertation council members number

Степень соответствия членов диссертационных советов / Dissertation council members compliance degree

Рис. 1. Динамика абсолютной численности и уровня соответствия ЧДС критериальным требованиям ВАК за 2015–2018 гг.

Fig. 1. Absolute numbers dynamics and compliance degree of dissertation councils members to the Higher Attestation Commission requirements in 2015–2018

Степень соответствия / Compliance degree 100%         115	2015		2018
90%-99,9%       171 80% - 89,9%       328             [---	1___________________________________________			662
70% - 79,9%       369				397
60% - 69,9%       406				205
50% - 59,9%       403				149
40%-49,9%      376		HI ■		75
35%-39,9%       ISO 30% - 34,9%       154
	1_______________________________	ZZ 1		16
	1________________________________________________________________	ZZ 1		12
20% 29,9%       357 10% - 19,9%       266 0,1%-9,9%       129	—	В 1		20
	1	_ 1		12
		ZZ 1		6
0%          296		ZZ 1		7
Рис. 2. Распределение числа ДС по группам степени соответствия ЧДС критериальным
требованиям ВАК при Минобрнауки России за 2015 и 2018 г.
Fig. 2. Distribution of the dissertation councils in terms of the compliance degree of the dissertation councils members according to the Higher Attestation Commission criteria under the Ministry of Education and Science
of Russia in 2015 and 2018

Рис. 3. Структура количества ЧДС, удовлетворяющих критериальным требованиям ВАК при Минобрнауки России к публикациям в 2015–2018 гг.

Fig. 3. The structure of the dissertation councils members satisfying the requirements to publications of the Higher Attestation Commission under the Ministry of Education and Science of Russia in 2015–2018

светло-серым цветом показан удельный вес ЧДС, удовлетворяющих критериальным требованиям.

Как следует из данных, приведенных на рис. 3, в 2018 г. по сравнению с 2015 г. численность ЧДС, соответствующих критериальным требованиям по зарубежным публикациям в WoS, Scopus и др., выросла c 51 % до 87 %; по публикациям из перечня ВАК – выросла с 78 % до 89 %; по монографиям – с 66 % до 89 %.

Требования к показателям соответствия ЧДС критериальным требованиям ВАК при Минобрнауки России в дорожной карте представлены в разрезе 52 групп научных специальностей. На рис. 4 показана сравнительная динамика за 2015–2018 гг. показателей соответствия ЧДС по всем группам научных специальностей.

Из приведенного рисунка следует, что положительная динамика показателей соответствия для ЧДС наблюдается по всем группам научных специальностей.

Обсуждение динамики показателей уровня соответствия ЧДС

Из представленных результатов на рис. 1–4, а также в табл. 2 следует, что за период реализации мероприятий дорожной карты наблюдается устойчивая тенденция к улучшению показателей соответствия публикационной активности ЧДС критериальным требованиям, представленным в Плане мероприятий (дорожная карта). Однако общий уровень соответствия ЧДС всей сети советов в 2018 г. составил 82,7 % и контрольный показатель в 90 % достигнут не был. При этом 45 % ДС достигли в 2018 г. показателя соответствия в 90 % по группам научных специальностей, по которым они функционируют. В 2015 г. таких советов было только 8 %.

Улучшение качественного состава ДС было достигнуто за счет планомерной четырехлетней работы профильного Департамента Минобрнауки

Рис. 4. Динамика показателей соответствия ЧДС критериальным требованиям ВАК, в разрезе 52 групп научных специальностей

Fig. 4. Compliance indicators dynamics of dissertation councils members according to the Higher Attestation Commission requirements in the context of 52 scientific majors

России и ВАК при Минобрнауки России с председателями ДС. Наиболее важными из них является:

– создание новых ДС только при соответствии состава ДС «жестким» критериальным требованиям, установленным Планом мероприятий (дорожная карта);

– внесение изменений в составы действующих ДС по тем же «жестким» критериям, при этом в течение 2015–2018 гг. было подготовлено 122 приказа о внесении частичных изменений в составы ДС;

– приостановление 1 ноября 2018 г. сроком на 6 месяцев деятельности ДС, не обеспечивших на 31 декабря 2017 г. соответствие ЧДС установленным критериальным требованиям к результативности научной деятельности более чем на 35 %6;

– прекращение деятельности 530 ДС.

В то же время административных мер по достижению контрольного показателя соответствия ЧДС в 90 % не достаточно, поскольку еще половина ДС находится ниже этого порога. Продление конечного срока достижения целевых индикаторов научной деятельности организаций и ЧДС, определенных Планом мероприятий (дорожная карта), до 31 декабря 2019 г. вряд ли позволит обеспечить достижение 90 % уровня соответствия по всем ДС.

Одним из путей достижения контрольных индикаторов может стать внесение изменений в нормативную базу, регулирующую деятельность системы государственной аттестации [21]. Для этого может быть использован трехлетний опыт деятельности ДС, создаваемых на базе организаций, получивших право самостоятельного присуждения ученых степеней7. Анализ деятельности этих советов [22] показал, что в большинстве из них численный состав ДС менее 19 человек; во многих советах в состав ЧДС включены кандидаты наук или PhD [23] с показателями публикационной активности выше, чем критериальные требования ВАК [24].

Требование к численному составу ДС не менее 19 человек для многих научных и образовательных организаций является трудновыполнимым, поскольку более половины ЧДС должны быть штатными сотрудниками организации, докторами наук с высокой публикационной активностью. Уменьшение состава совета на 1 человека с низкими показателями публикационной активности может улучшить показатель ДС на 5 %, а на три человека – на 15 %. При этом можно дифференцировать требования к численности ЧДС в зависимости от числа (от 1 до 3) научных специальностей и отраслей науки, представленных в совете. Привлечение в состав совета кандидатов или PhD с высокой публикационной активностью также будет способствовать улучшению показателей совета.

Из 2106 диссертационных ДС, действовавших в 2018 г., 1144 совета имели в составе от 19 до 21 ЧДС, а 962 совета имели в составе от 22 до 43 ЧДС. При уменьшении количественного состава всех советов на три ЧДС, которые не соответствуют критериальным требованиям, итоговая степень соответствия всей сети ДС возрастет с 82,7 % до 91,9 %.

Заключение

Результаты четырехлетней реализации мероприятий дорожной карты, направленные на оптимизацию сети ДС, существенно улучшили показатели публикационной активности ЧДС и уровень соответствия этих показателей критериальным требованиям ВАК.

В то же время административных мер по достижению контрольного показателя соответствия ЧДС в 90 % недостаточно, необходимо рассмотреть возможность внесения изменений в нормативную базу, регулирующую деятельность системы государственной аттестации.