Создание интерактивной сетевой SMART-системы мониторинга результатов деятельности аспирантов и магистрантов

Социально-экономические изменения последнего десятилетия повлияли на стратегию развития вузов, ориентировали их на инновационную, предпринимательскую, научную активность. В такой ситуации особые требования предъявляются к постоянному мониторингу результатов деятельности обучаемых. Информационные технологии открывает новые возможности для разработки и внедрения интерактивных систем мониторинга. Полнота, достоверность и оперативность получаемой информации необходимы сегодня для быстрого реагирования на изменения внешнего социума и быстрого принятия нужных решений.

Пристального внимания в системе оценивания качества высшего профессионального образования на современном этапе его развития требует оценка результативности деятельности магистрантов и аспирантов. Этой проблеме в педагогической науке и образовательном менеджменте до последнего времени уделялось незначительное внимание. Как правило, системы мониторинга быстро дискредитировали себя, поскольку пользователи приспосабливались к ее особенностям и результаты мониторинга достаточно быстро начинали носить необъективный характер.

Вместе с тем, проблема разработки современных технологий оценивания образовательной деятельности является острейшей. Разработка все более совершенных технологий оценки деятельности магистрантов и аспирантов – требует обращения к опыту лучших зарубежных и отечественных вузов, критического переосмысления распространенной практики исследования новых зарекомендовавших себя подходов, обеспечения поддержки конструктивных, творческих инициатив. Особенно остро сегодня стоит задача выявления процедуры мониторинга, способствующей формированию адекватной оценки результатов деятельности. Проектирование интерактивной сетевой системы мониторинга деятельности аспирантов и магистрантов, как инструмента управления качеством образовательного процесса, представляет собой назревшую потребность в деле совершенствования технологий рейтинговой оценки качества инновационной и научно-исследовательской деятельности в высшей школе.

К настоящему времени сформировалась обширная библиография, посвященная проблемам качества образовательной деятельности в высшей школе и вопросам мониторинга качества как прогрессивной технологии оценивания качества образования: разработаны концептуальные принципы контроля и оценки качества образовательного процесса в вузе. В современных публикациях рассматриваются «умные технологии», среди которых: логистические решения для достижения обучаемым освоения необходимых компетенций [1], модели управления учебным процессом на основе адаптации к индивидуальным характеристикам обучаемого [2], задачи управления саморазвитием преподавателя [3], экспертные системы для управления проектной деятельностью в системе дистанционного обучения [4], проектирование интеллектуальных сред для обучения [5, 6, 7], в том числе для наукоемких специальностей [8] и другие.

Обсуждение технологий оценки качества результатов обучения сегодня чаще всего происходит в контексте современных тенденций развития SMART-технологий. Вместе с тем, само понимание SMART-технологий в образовании еще не устойчиво и колеблется от использования SMART-устройств для доставки знаний и формирования интегрированной образовательной интеллектуальной виртуальной среды обучения до создания адаптивных, самонастраивающихся (под потребности преподавателя и обучаемого) систем. Наиболее распространенным в настоящий период является понимание Smart-технологий как гибких адаптивных в интерактивной образовательной Интернет-среде с использованием свободно доступного мирового образовательного контента. Оно базируется на общих стандартах, технологиях и соглашениях, установленных между сетью учебных заведений и профессорско-преподавательским составом. В данном контексте мы и рассматривали создание адаптивной системы мониторинга деятельности.

Анализ отечественной и зарубежной научной литературы свидетельствует об отсутствии специальных, системных исследований, посвященных разработке интерактивной адаптивной системы мониторинга исследовательской и инновационной деятельности аспирантов и магистрантов с использованием перспективных интеллектуальных технологий. В то же время, разработка проекта сетевой системы мониторинга деятельности на основе современных информационных технологий призвана диагностировать, корректировать и совершенствовать работу обучаемых.

Обоснование адаптивного мониторинга результатов деятельности магистрантов и аспирантов

Мониторинг результатов деятельности – это многоцелевая, полифункциональная система, главная цель которой заключается в получении объективной и однозначной оценки за счет повышения полноты и достоверности информации о количественных и качественных изменениях процессов и результатов деятельности.

Общеизвестно, что основными задачами мониторинга являются: стимулирование качества и результативности труда обучаемых и сотрудников, обусловливающего улучшение качества основных видов деятельности и совершенствование качества образовательного процесса в вузе; повышение обоснованности принимаемых управленческих решений (в первую очередь в области кадровой политики); стимулирование профессионального и личностного роста обучаемых и педагогического коллектива; формирование потребности к самооценке деятельности; интенсификация деятельности через установление ее рейтинговой оценки, определяемой на основе анализа основных показателей; выявление факторов, оказывающих влияние на качественные аспекты в деятельности; обоснование стратегии и прогноза развития вуза.

В нашем случае система мониторинга должна обладать комплексом функционально-технологических характеристик, отражающих содержание основных видов деятельности обучаемого: учебной; исследовательской деятельности; инновационной деятельности; социальной, спортивной.

Ключевой особенностью созданной нами системы является ориентация на SMART-технологии. Несмотря на существующее различие в понимании этой технологии от использования смартфонов и устройств для доставки знаний обучающимся и формирования интегрированной интеллектуальной виртуальной среды для образования до интеллектуализации систем обучения, мы полагаем необходимым решать вопрос адаптации системы под конкретного человека.

На схеме (Рис.1) представим общую логику работы в созданной нами системе.

Рис. 1. Блок-схема процессов формирующих итоговую отчетность при регистрации студента в системе

Принимая во внимание указанное выше, рейтинг должен быть максимально конкретным и ясным. Степень его «прозрачности» определяется однозначностью восприятия всеми. Измерение производится как по конечному результату, так и по промежуточным. Необходимо учитывать, что результат достижим с точки зрения внешних и внутренних ресурсов, которыми располагает вуз. Показатели должны быть реалистичными и достижимыми для любого аспиранта и магистранта. Чересчур высокие или низкие показатели тех или иных критериев обычно теряют свое значение, и их начинают игнорировать – поэтому нужна технология автоматизированного настраивания системы на изменения веса и значимости показателя, который достигнут всеми или достигнут единицами.

Измерение должно быть реалистичным и уместным в данной ситуации, вписываться в нее и не нарушать баланс с другими показателями и приоритетами. Срок или точный период выполнения задачи определения рейтинга может иметь как фиксированную дату, так и охватывать определенный период.

Таким образом, суть адаптивности системы мониторинга заключается в самонастраивании системы на конкретную ситуацию в оценке достижений.

Реализуется такой подход на основе использования аппарата компьютерной алгебры для целей установления веса того или иного показателя в конкретной ситуации (срезе) состояния общего показателя по критерию (его выполнения или невыполнения большинством аспирантов или магистрантов).

Общая формула расчета коэффициента активности магистрантов и аспирантов, выглядит следующим образом:

где:

К - коэффициент активности;

• x 1..n - количественный показатель по виду деятельности;

• x _ср - среднее значение по данному количественному показателю;

• x _max - максимальное значение по данному показателю;

• b    - коэффициент показателя;

B - коэффициент блока (вида деятельности).

Расчет общего коэффициента активности состоит из суммы коэффициентов блоков деятельности, т.е. К = pl + р2 + рЗ + р4 + р5 , где р - коэффициент блока деятельности. Покажем и опишем пример частного случая расчета блока научноисследовательской деятельности р- .

Значения показателей X1..X9 пользователь вводит в систему мониторинга, для получения значений Xср1.. Xср9 и Xmax1..Xmax9 делается выборка из базы данных путем sql-запроса по каждому соответствующему показателю, которые постоянно изменяются при добавлении в базу данных новых значений (добавление нового пользователя) или изменение старых (редактирование данных пользователем), система пересчитывает значения коэффициентов блоков деятельности и коэффициент активности магистрантов и аспирантов по каждому пользователю в актуальный момент времени. Происходит адаптация системы под внешнюю динамическую среду. Такой подход делает подстраивание под мониторинг со стороны обучаемых практически невозможным.

Условия применения интерактивной сетевой системы мониторинга в вузе и включают: необходимость осуществления комплексного анализа показателей основных видов индивидуальной деятельности; наличие преподавателей – руководителей магистерских и аспирантских программ, подготовленных для работы с интерактивной сетевой системой мониторинга; прохождение преподавателями краткосрочных курсов повышения квалификации; наличие в вузе необходимой научно-методической литературы, программного обеспечения, баз данных; систематичность в проведении процедуры мониторинга; ориентация управленческих структур вуза на формирование у преподавателей мотивационной готовности улучшать показатели деятельности.

Программная составляющая информационной модели мониторинга деятельности обладает совокупностью свойств, отражающих эффективность ее применения как прогрессивной технологии: для работы в проекте не требуется дополнительного оборудования, кроме компьютера с доступом в Интернет и Интернет-браузер, поддерживается кроссплатформенность (нет зависимости от ОС), интерфейсы легки в освоении и интуитивно понятны даже начинающим пользователям; система мониторинга является закрытой информационной системой, в которой строго регламентирована регистрация пользователей, а также соблюдаются все требования безопасности, предъявляемые к подобным системам; удобная навигация и простота администрирования позволяют создать собственную базу данных в проекте в короткие сроки, поддерживается импорт данных из форматов Excel; участие в заполнении разделов при формировании базы данных сможет принять пользователь, не имея навыков программирования; возможность принимать обоснованные управленческие решения на основе удобных форм отчетности с детальной расшифровкой любых показателей и интерактивных средств анализа; автоматическое, по заданному графику, получение информации (по электронной почте, в виде бумажного отчета); повышение эффективности работы за счет автоматизации рутинных операций, ведения учета в реальном масштабе времени, быстрой и удобной подготовки информации для принятия решений на разных уровнях; без значительных временных и денежных затрат обеспечена перенастройка системы при изменении масштабов структуры, подходов к управлению, развитии территориальной структуры; современный комплекс инструментальных средств и технологий для разработки, модификации, администрирования и сопровождения системы мониторинга качества деятельности кафедры; легкость адаптации, широкие возможности масштабирования и интеграции, простота и удобство администрирования и поддержки позволяет тратить минимум усилий на решение различных технологических вопросов.

Результаты практической реализации мониторинга на основе разработанной модели

Реализованная на практике модель в виде программного продукта состоит из взаимосвязанных компонентов:

• -    режим заполнения показателей;

• -    модули обработки данных и построения диаграмм;

• -    режим просмотра данных, рейтинга по структурным подразделениям, направлениям подготовки аспирантов и магистрантов;

• -    раздел просмотра общих сведений по университету.

Функционирование модели интерактивной сетевой системы мониторинга деятельности проверялась в соответствии с основными видами индивидуальной деятельности обучаемых в вузе (Рис.2).

Научно-исследовательская д-ть

Учебная деятельность

Инновационная деятельность

Ориентирована повышение профессионального потенциала

и

профессионального мастерства при решении новых проблем будущей профессиональной деятельности магистрантов и

Достижение необходимого

оценочного

уровня

формирования необходимых компетенций аспирантов и магистрантов в процессе обучения в университете и прохождения всех видов практик на производстве, в научно-исследовательских институтах, организациях и предприятиях

Индивидуальные показатели

Социальная и другая д-ть

Учитывает решение новых задач, создание технологий, работы по

патентному, регистрационному обеспечению разработок, техническому

их

Учитывает

участие жизнедеятельност

в

и   университета, управление творческими группами,

Ппоказатели данного раздела учитывают наличие достижений, навыки владения инструментарием и языками, спортивные звания и другие показатели, зафиксированные на начало обучения по данной программе в университете

Рис. 2. Содержание основных видов индивидуальной деятельности аспирантов и магистрантов

Система состоит из трех подсистем: конструкторе направлений, содержания критериев и их показателей; системе заполнения проведения опроса и проверки на адекватность; системе выводов результатов. Основной интерфейс – эргономичен и отражает логику проведения работы по мониторингу.

Рис. 3. Интерфейс конструктора направлений (режим изменения специальнсти)

Ф.И.О.: Иванов Иван Иванович

Институт:

Институт информатики и вычислительной техники

Специальность: Информационная безопасность

Курс:

Магистрант, 1

Изменить данные

Выйти из системы

Ниже распол смена анкета, которую Вам необходимо заполнить. Вы можете не заполнять всю анкету сразу, для этого просто сохраните её после изменений (кнопка "Сохранить изменения"), а затем продолжите её заполнять в любое удобное для Вас время. Когда Вы закончите её заполнять, проверьте её и отправьте (кнопка "Проверить и отправить"). Перед добавлением Вашей анкеты в рейтинговую систему, данные будут проверены модераторами. После проверки соответствующая информация будет расположена на этой странице.

Сохранить изменения

Проверить и отправить

1. Учебная деятельность

• 2.    Научно-исследовательская деятельность 3. Общественная деятельность

4. Культурно-творческая деятельность 5. Спортивная деятельность

• 1.    Учебная деятельность

  • 1.1.    Средняя аттестационная оценка:

  • 1.2.    Средняя оценка за практику:

|w               ~| @

• 1.3.    Получаете пи повышенную стипендию:

Рис. 4. Интерфейс профиля анкетируемого (режим заполнения)

Рис. 5. Вывод рейтингов институтов в таблице и диаграмма, отражающая средний рейтинг студента по каждому институту

Рис. 6. Диаграмма, отражающая средний и лучший рейтинг обучаемых по каждому направлению подготовки

Рис. 7. Вывод рейтинга обучаемых и возможность фильтрации и сортировки по интересующим параметрам

На рисунке 7 представлен рейтинг пользователей на момент контрольного среза, на рисунке 8 - рейтинг после добавления нового пользователя. Как видно -общий и рейтинг по отдельным блокам изменился, система сделала перерасчет с учетом новых добавленных данных, система адаптируется после каждого действия, связанного с изменением данных.

Место Фамилия Имя Отчество Курс Степень Институт               Специальность Р1 Р2 РЗ Р4 Р5 Итоговый

1	Иванов	Петя	Антонович	2	Магистрант	Институт информатики и вычислительной техники	Информационная безопасность	377 7.42 5.65 4.76 3.19	27.27
2	Шмидт	Светозар	Максович	2	Магистрант	Институт промышленной экологии	Технология транспортных процессов	3.7 6.86 2.77 2.97 2.62	20.67
3	Кулагина	Татьяна	Викторовна	2	Магистрант	Институт информатики и вычислительной техники	Информационная безопасность автоматизированных систем	2.83 671 1.9 5.15 3.46	20.56
3	Абрамов	Карл	Станиславович 2		Магистрант	Институт информатики и вычислительной техники	Информационная безопасность автоматизированных систем	5.02 5.07 4.04 4.61 1.86	19.45
	Захаров	Всеволод Макаровым		2	Магистрант	Институт информатики и вычислительной техники	Информационная безопасность автоматизированных систем	2.61 3.11 37 8 4.52 2.93	15.61
6	Муравьёва Валерия		Аркадьевна	2	Магистрант	Институт промышленной экологии	Технология транспортных процессов	3.58 3.58 4 01 2.65 1.53	15.26
7	Рустамов	Юрий	Миронович	2	Магистрант	Институт промышленной экологии	Технология транспортных процессов	407 3.24 2.59 3.63 3.98	1417
8	Соколов	Алексей	Петрович	2	Магистрант Институт машиностроения		Машиностроение	0.86 1.88 071 0.81 0	5.23
	Рис. 8. Рейтинг пользователей в системе на момент фиксированного среза
Место Фамилия		Имя	Отчество	Курс Степень		Институт	Специальность	Р1 Р2 РЗ РЗ Р5 Итоговый
1	Иванов	Петя	Антонович	2	Магистрант	Институт информатики и вычислительной техники	Информационная безопасность	373 7.37 5.65 473 3.23	27.2
2	Шмадт	Светозар	Максович	2	Магистрант	Институт промышленной экологии	Технология транспортных процессов	3.66 6 7 2 274 2.96 2.67	20.36
3	Кулагина	Татьяна	Викторовна	2	Магистрант	Институт информатики и вычислительной техники	Информационная безопасность автоматизированных систем	2.81 6.57 1.9 5.04 3.49	20.26
3	Дибров	Павел	Николаевич	2	Магистрант	Институт машиностроения	Технологические машины и оборудование	4.34 6.81 2.34 4.33 0.51	19.54
5	Абрамов	Карл	Станиславов!	2	Магистрант	Институт информатики и вычислительной техники	Информационная безопасность автоматизированных систем	4.97 4.95 4 08 4.55 1.88	19.23
6	Захаров	Всеволод	Макарович	2	Магистрант	Институт информатики и вычислительной техники	Информационная безопасность автоматизированных систем	2.61 3.1 379 4.46 2.95	15.58
'	Муравьева Валерия		Аркадьевна	2	Магистрант	Институт промышленной экологии	Технология транспортных процессов	3.57 3.55 4 2.63 1.54	15.19
8	Рустамов	Юрий	Миронович	2	Магистрант	Институт промышленной экологии	Технология транспортных процессов	4.04 3.19 2.54 3.59 4.04	14

Рис. 9. Рейтинг пользователей после добавления нового пользователя

Интерактивная сетевая система мониторинга деятельности аспирантов и магистрантов позволяет определить уровень достижения и сравнение показателей учебного, исследовательского, инновационного и социально-воспитательного процессов в вузе, выявить тенденции, установить причины, тормозящие или стимулирующие улучшение качественных аспектов работы, провести сопоставительный анализ деятельности коллективов внутри вуза.

Заключение

Сетевая система мониторинга деятельности магистрантов и аспирантов позволяет учитывать результативность их образовательной деятельности по ряду показателей. Математический аппарат настроен таким образом, что система пересчитывает вес показателей каждый раз при вводе новых данных. Система автоматически учитывает количество достигнутых результатов обучаемыми и, в зависимости от этого, перераспределяет значение показателей. Тем самым адаптируясь каждый раз под конкретное состояние достижений всех обучаемых. Если показатель выполняется большинством – его вес уменьшается автоматически. Что позволяет достаточно адекватно судить об уровне достижений обучаемых и не позволяет подстраиваться под систему.

Система как конструктор, позволяет изменять не только структуру и содержание критериев, учитывать группы и принадлежность обучаемых к институтам, направлениям подготовки, программам. В ней можно перераспределять уровни доступа к данным и распределять функции контроля за вводом результатов от первичного автоматизированного до руководителя программы.

Использование данной системы открывает возможность иметь актуальные результаты деятельности обучаемых и быстро принимать необходимое решение для коррекции процесса управления образовательного процесса.

Отдельные результаты получены при финансовой поддержке РФФИ по проекту: «Социологический анализ Интернет-пространства как индикатора социокультурной динамики развития открытого образования», № 16-06-00176, 2016-2018.

Некоторые результаты получены при финансовой поддержке РГНФ по проекту "Инновационный подход к формированию образовательной среды в вузе и его реализация в IT- сервисах", № 15-06-10306, 2015-2017.