Инструментарий оценки сформированности гибких навыков студентов ИТ-направлений - взгляд из будущего

Автор: Касьянова Е.В.

Журнал: Высшее образование сегодня @hetoday

Рубрика: Дидактика высшей школы

Статья в выпуске: 4, 2023 года.

Бесплатный доступ

Рассматривается проблема поиска путей оценивания гибких навыков будущих специалистов в области информационных технологий при обучении профессиональным дисциплинам. Для определения актуальных гибких навыков, востребованных бизнесом в сфере коммуникаций и информационных технологий, проведено сопоставление трудовых функций, трудовых действий и необходимых умений специалистов, приводимых в профессиональном стандарте ПС 06.016 - «Руководитель проектов в области информационных технологий», с универсальными компетенциями ФГОС ВО 3++ направления подготовки 09.03.01. Предложена методика, позволяющая развивать востребованные бизнесом гибкие навыки при обучении информационным технологиям в условиях медиапроектной деятельности при индивидуальном подходе к распределению ролей в команде. Определены результаты проявления гибких навыков при разработке медиаобразовательных проектов, предложены методы их оценки. Результаты исследования могут представлять интерес для преподавателей, моделирующих профессиональные задачи для студентов, обучающихся по инженерным направлениям подготовки. Практическая значимость исследования заключается в том, что предложенная методика обучения информационным технологиям, развивающая гибкие навыки, может быть использована при разработке учебно-методических комплексов для подготовки студентов по иным дисциплинам и модулям, а также для повышения квалификации преподавателей.

Еще

Информационные технологии, цифровые инструменты, гибкие навыки, профессиональные стандарты, медиаобразовательный проект

Короткий адрес: https://sciup.org/148327360

IDR: 148327360   |   DOI: 10.18137/RNU.HET.23.04.P.035

Текст научной статьи Инструментарий оценки сформированности гибких навыков студентов ИТ-направлений - взгляд из будущего

онные коллективы, деятельность которых осуществляется с использованием телекоммуникационных технологий [4, с. 4750].

Цифровые продукты не создаются быстро, требуется упорство в поиске оптимального проектного решения. Важно продумывать долгосрочные цели, быть настойчивым в продвижении своих идей, а также уметь контролировать свое время-пространство. Личные качества и сформированные гибкие навыки в таких условиях способствуют сопоставлению результатов собственной активности с приверженностью долгосрочным целям, что приводит к достижению положительных резуль- татов и жизненной успешности ИТ-специалиста [1, с. 503].

Областью профессиональной деятельности ИТ-специалистов является разработка программного обеспечения компьютерных вычислительных систем, в ней задействованы интеллектуальные, человеческие, материальные и временные ресурсы. Для управления таким сложным комплексом требуются хорошо подготовленные специалисты, владеющие профессиональными и универсальными компетенциями. Основой разработки современного программного обеспечения является ИТ-проект, содержащий сформулированную заказчиком проблему, работу ИТ-специалистов, совокуп- ность документов и последовательность взаимосвязанных событий (этапов работ). В связи с этим значимость формирования и развития навыков разработки ИТ-проекта в команде увеличивается. Поэтому умение реализовывать проектные технологии в команде достаточно значимо для будущего ИТ-специалиста [9, с. 86].

Исследователи в области разработки программных проектов отмечают ряд сложностей, связанных с применением гибких навыков при налаживании коммуникаций между членами проектной ИТ-команды и заказчиком цифрового продукта, в процессе ведения аналитической работы, формулировки целей и задач проекта, выбо-

ИНСТРУМЕНТАРИЙ ОЦЕНКИ СФОРМИРОВАННОСТИ ГИБКИХ НАВЫКОВ СТУДЕНТОВ

ИТ-НАПРАВЛЕНИЙ – ВЗГЛЯД ИЗ БУДУЩЕГО ра оптимального решения выпускниками ИТ-направлений обучения [5, с. 23]. Проблемы возникают, поскольку основополагающие для гибких навыков личностные качества достаточным образом не формируются и не развиваются в системе высшего образования.

Вчерашний студент, а сегодня дипломированный ИТ-специалист, оглядываясь назад, обнаруживает, что он не научился обсуждать задачи с «коллегой» по проекту, поскольку все задания в вузе были рассчитаны на индивидуальное выполнение. Он не знает, как написать «Спецификацию на программный продукт», поскольку подготовке технических текстов время не уделял – все оно было посвящено кодированию. Отсутствует у него понимание ответственности за свой этап разработки проекта, поскольку обучение ведению ИТ-проектов прошло за один семестр где-то на старших курсах и соответствующих устойчивых навыков не выработалось.

Какие полезные навыки можно приобрести, разработав один учебный проект? Лишь комплекс взаимосвязанных ИТ-проектов в течение всего периода обучения предоставит будущим специалистам возможность побывать в разных ролях в ИТ-команде (аналитик, проектировщик, программист, тестировщик) и даже попробовать себя в роли руководителя ИТ-проекта. Взгляд из будущего с позиции дипломированного ИТ-бакалавра в прошлое, позволяет понять необходимость формирования гибких навыков и соответствующих личностных качеств уже с первого года обучения в вузе. Далее, от курса к курсу на основе междисциплинарных связей необходимо расширять систему развития гибких навыков, востребованных бизнесом и связанных с продуктивным решением профессиональных задач.

Гибкие навыки предполагают непрерывный и комплексный процесс их формирования, развития и применения при решении жизненных и профессиональных задач на протяжении вузовской подготовки с первого курса до выпускного. Возникает необходимость создания целостной системы формирования, измерения и оценивания уровней сформированности гибких навыков при изучении информационных технологий, которая будет включать традиционный и цифровой форматы измерения и учитывать прямой и косвенный подходы к диагностике.

Нами предпринята попытка определить практические подходы к измерению гибких навыков будущих ИТ-специалистов при обучении информационным технологиям на первом курсе обучения.

Востребованные работодателями soft skills начинают формироваться в жизни каждого индивида в дошкольном возрасте, развиваются в системе общего и среднего профессионального образования, в вузах. На основании требований Федерального государственного образовательного стандарта среднего общего образования (ФГОС СОО), утвержденного приказом № 413 от 17 мая 2012 года, по которому сейчас продолжают обучение образовательные учреждения среднего общего образования, проектные технологии, сотрудничество и учебно-исследовательская деятельность реализуются лишь в индивидуальном формате. Требования к таким результатам как умение разрабатывать проект в команде, в котором нуждаются организации сферы ИТ, в ФГОС СОО не сформулированы. Исследователи проектных технологий, реализуемых в среднем общем образовании отмечают, что практика проектов в массе школ не соответствует той задаче, на решение которой ориентирован метод проектов – развитию мышления [2, с. 155; 3, с. 112; 8, с. 295]. Многолетние наблюдения автора и беседы с преподавателями Сибирского государственного университет имени академика М.Ф. Решетнева (далее – СибГУ)

показали, что на ИТ-направления обучения приходят учиться студенты, слабо взаимодействующие друг с другом, не владеющие навыками проектной деятельности в команде и стремящиеся работать в одиночестве.

Для поиска причин сложившейся ситуации проведен анализ преемственности ФГОС СОО и ФГОС ВО 3++ в разрезе востребованных ИТ-бизнесом гибких навыков. Введение редакции 3++ ФГОС ВО направлено на интеграцию образовательного и профессионального стандартов. Универсальные компетенции (далее – УК) ФГОС ВО предполагают наличие у будущего выпускника совокупности социально-личностных качеств, которые призваны обеспечить трудовую деятельность на установленном квалификационном уровне. Одно из основных предназначений УК – достижение положительной оценки выпускника в части его социализации в профессиональном сообществе.

ФГОС ВО 3++ по направлению подготовки 09.03.01 «Информатика и вычислительная техника» в качестве требований к результатам освоения программы бакалавриата определяет такие УК, как аналитическая работа, разработка проектов в команде, осуществление продуктивных коммуникаций, а также самоорганизация деятельности и самообучение. Именно в этих качествах ИТ-специалистов особенно заинтересованы представители ИТ-бизнеса при разработке ИТ-проектов. Анализ дефицитов в освоении личностных (далее – ЛР) и метапредметных (далее – МПР) результатов ФГОС СОО и универсальных компетенций ФГОС ВО 3++ показал, что однозначное соответствие между ними в разрезе исследуемых гибких навыков не определено [11, с. 26].

Проведенная исследователями операционализация планируемых результатов на уровнях СОО и ВО позволила установить соотношения между индикаторами прояв- ления ЛР (и МПР) и УК [11, с. 26]. Анализ соотношений показал, что существуют дефициты по исследуемым навыкам и принцип преемственности результатов СОО и ВО реализован не полностью. Это приводит к снижению качества высшего образования и вызывает сложности в развитии гибких навыков, о значимости которых заявляют представители ИТ-сферы и исследователи цифровых образовательных технологий.

Требования к квалификации разработчиков программного обеспечения определены в профессиональных стандартах сферы 06 – Связь, информационные и коммуникационные технологии. Ранее автором был рассмотрен профессиональный стандарт ПС 06.016 – «Руководитель проектов в области информационных технологий» на предмет сопряжения формулировки УК с требованиями профессионального стандарта. На основании проведенного анализа и имеющихся классификаций гибких навыков из описания формулировок УК в ФГОС ВО 3++ автором выделены следующие гибкие навыки, значимые при разработке современных программных проектов в деятельности будущих ИТ-специалистов: анализ, командная работа, самообразование, коммуникации, самоорганизация и разработка проектов.

Целесообразно моделировать будущую профессиональную деятельность и уделять внимание развитию гибких навыков при обучении дисциплине «Информационные технологии». ИТ являются не только основным инструментом формирования и развития профессиональных компетен-ций,но и составляют предметную область деятельности ИТ-специалистов, объединяющую в вузе студентов, преподавателей и цифровые инструменты. Следовательно, открываются возможности для взаимодействия всех участников процесса в условиях, идентичных реальным.

Автором разработана методика, развивающая у будущих ИТ-специалистов востребованные ИТ-бизнесом гибкие навыки при обучении ИТ. Апробация методики осуществляется в СибГУ при обучении студентов направления 09.03.01 «Информатика и вычислительная техника» в течение третьего модуля первого семестра [6, с. 50; 7, с. 203].

Учебный компонент методики отображает цели и задачи обучения, содержит инструкции по выполнению учебных заданий, учитывает специфику предметного содержания дисциплины «Информационные технологии» и особенности медиапроектной деятельности. Оценочный компонент включает средства измерения, контроля и оценки степени развития гибких навыков. Организационный компонент объединяет технологии управления проектами. Предложенная методика базируется на командных медиаобразовательных проектах с распределением ролей и предполагает обучение будущих ИТ-специалистов информационным технологиям, развивает медиаграмотность, а также ориентирована на формирование востребованных ИТ-бизнесом гибких навыков.

Суть методики заключается в том,что студенты в командах по1 2–3 человека разрабатывают цифровые проекты в соответствии с выбранной ролью – редактор, дизайнер, видеоинженер, совмещая ее с ролью руководителя команды. Результатом медиаобразователь-ного проекта является медиапродукт – аудиовизуальное произведение, состоящее из зафиксированной серии связанных между собой изображений и предназначенное для зрительного и слухового восприятия с помощью соответствующих технических устройств [10], или анимационные и видеофильмы. При разработке медиаобразо-вательных проектов будущие ИТ-специалисты осваивают технологии и цифровые инструменты, необходимые для дальнейшей профессиональной деятельности – облачные документы, канбан-доски, ментальные карты, пакеты обработки графической информации, позволяющие развивать, помимо профессиональных, универсальные компетенции.

Важным условием успешности реализации любой методики является возможность проверить результат. Диагностика достижений образовательной деятельно-сти,в основе которой лежит ком-петентностный подход, остается обсуждаемой и нерешенной проблемой в научном сообществе много лет. Оцениванию результатов образования, созданию диагностических комплексов в практике современной высшей школы посвящали свои исследования отечественные и зарубежные авторы – В.С. Аванесов (информаци-онно-констатирующий подход), Г.Е. Зборовский, (социометрический подход), И.А. Зимняя (интегративный подход), Н.В. Изотова (рефлексивный подход), Д.С. Каримова (социально-педагогический подход), Е.А. Лебедева, И.Г. Шен-дрик (производственный подход), С.А. Литвина (assessment center), О.В. Решетников (антропологический подход), В.П. Смирнов (этический подход) и др.

При осуществлении выбора инструментария оценивания гибких навыков, наиболее значимых в деятельности будущих ИТ-специалистов, мы ориентировались на диагностико-обучающий подход (С.И. Архангельский, В.А. Сла-стенин), который трактует оценку как анализ учебного процесса и оказание на его основе соответствующей помощи обучающимся. Процесс оценивания рассматривается авторами данного подхода как совокупность действий, позволяющих выявлять качественно-количественные характеристики процесса и результатов обучения, а также устанавливать прямую и обратную связь между преподавателем и студентом.

ИНСТРУМЕНТАРИЙ ОЦЕНКИ СФОРМИРОВАННОСТИ ГИБКИХ НАВЫКОВ СТУДЕНТОВ

ИТ-НАПРАВЛЕНИЙ – ВЗГЛЯД ИЗ БУДУЩЕГО

В России и за рубежом исследователями используются различные инструменты оценивания результатов образования – наборы специализированных по содержанию и валидированных опросников, кейсовых заданий, тесты и иные виды инструментов и способов, позволяющих оценить уровни проявления поведенческих индикаторов гибких навыков.

В процессе применения методики автором составлен перечень результатов проявления гибких навыков при обучении информационным технологиям в условиях медиапроектной деятельности с распределением ролей в команде (см. Таблицу). На основе образовательных результатов, полученных в процессе разработки и реализации проектов, можно судить о проявлении студентом личностных качеств, а также формируемых на их основе гибких навыков, и создавать систему их оценивания.

Освоение гибких навыков подразумевает изменение поведения личности. Студент должен научиться делать что-то новое самостоятельно, в составе команды и в соответствии с выбранной ролью. Информация, которую он получает и осмысливает в результате освоения навыка, должна не просто запомниться, а стать руководящим принципом, правилом поведения. В процессе реализации проекта будущий ИТ-специалист, двигаясь по его этапам, сталкивается с ситуациями, в которых он может применить новую модель поведения, по-новому проявить свои личностные качества.

Гибкие навыки формируются и развиваются на протяжении всей жизни человека. Один модуль на первом курсе университета – небольшой отрезок времени, когда появляется возможность проявить личностные качества, решая новые задачи в новом коллективе своей команды. При оценке выделенных автором гибких навыков необходимо опираться на:

  •    содержание отчетных материалов, представленных студентом – текстовых и графических документов, ссылок на Интернет-ресурсы;

  •    наблюдение за процессом проявления гибких навыков студентом – оценивается его поведение – активность участия в дискуссиях по теме проекта, выполнение заданий в срок,осуществление коммуникаций.

Содержание полученных материалов и результаты наблюдений определяют возможный инструментарий оценки гибких навыков:

  • •    тестирование для выявления навыков командной работы, таких личностных качеств как лидерство, коммуникабельность, самоорганизация (тест Р. Белбина на определение роли в команде, тест на коммуникативность «КОС-1» В.В. Синявскиого и Б.А. Федоришина, методика «Самоорганизация деятельности» Е.Ю. Мандриковой); • диагностические задания для определения уровня сформиро-ванности навыков поиска, анализа и синтеза информации, развития системного мышления, умений, необходимых для разработки и реализации проекта, самоорганизации и самообучения (задания

Таблица

Результаты реализации этапов медиапроекта, полученные при развитии гибких навыков

Гибкий навык

УК

ФГОС 3++

Этап медиапроекта

Форма представления результата реализации этапа медипроекта

1

Поиск информации

УК-1

Предпроектный анализ

• ссылка на медиаконтент, ссылка на текст по теме

2

Анализ информации

УК-1

Активация проекта Предпроектный анализ

• аналитический отчет

3

Синтез информации

УК-1

Все этапы

  • •    отчет по проекту,

  • •    выполнение задач в соответствии с ролью

4

Разработка

и реализация проекта

УК– 1

УК – 2

УК – 3

Все этапы

  • •    постановка проблемы и цели,

  • •    чек-лист по каждому этапу,

  • •    принятие решения о выборе ресурсов,

  • •    выполнение задач этапов в срок,

  • •    оценка результатов выполнения этапов

5

Командная работа

УК-3

Все этапы

  • •    результат выполнения своей задачи в команде в соответствии с выбранной ролью,

  • •    помощь другим участникам команды

6

Коммуникации

УК-4

Все этапы

осуществление процесса делового взаимодействия в аудитории и сети (мессенджеры, социальные сети)

7

Самоорганизация

УК-6

Все этапы

выполнение своей задачи по этапу в установленный срок

8

Самообучение

УК-6

Все этапы

  • •    освоенность цифрового ресурса,

  • •    выполнение задания с условием

этапов проекта, имитирующие разработку программного продукта);

  • •    педагогическое невключен-ное наблюдение для выявления уровня сформированности навыков командной работы, лидерства, самоорганизации и самообучения (фиксация наблюдений за действиями студентов на занятии в дневнике наблюдений);

  • •    педагогическое включенное наблюдение для анализа результатов выполнения заданий и определения плана дальнейших действий (фиксация событий при совместной дискуссии участников команды и преподавателя в дневнике наблюдений);

  • •    самооценка студентами собственных гибких навыков при выполнении заданий проекта в команде;

  • •    рейтинг команд по результатам реализации этапов командных медиаобразовательных проектов.

Ряд навыков можно оценить в динамике, проведя тестирование на коммуникативность, самоорганизацию и командные навы- ки до и после реализации проекта. Навыки, связанные с аналитической работой, возможно оценивать другими способами – с помощью опросов, изучения результатов выполнения заданий и фиксации итогов наблюдений. Динамику изменения навыков управления проектами и самообучения можно наблюдать и оценивать комплексно при дальнейшем обучении по программам других дисциплин.

Комплексная оценка развития гибких навыков студентов в процессе обучения ИТ учитывает мнение преподавателя и студентов. В качестве ее инструментария использовались диагностические задания, включенное и не включенное наблюдение, тестирование и самооценка. Студенты проходили инструктаж о содержании навыков и индикаторов их освоения. После выполнения медиапроекта выставлялись оценки по всем навыкам студентами и преподавателем. Для количественной оценки результатов для каждого уровня освоения определены числовые значения:

  • •    не освоен – 1;

  • •    частично освоен – 2;

  • •    освоен – 3.

Поученные результаты визуализируются (см. Рисунок 1).

Диаграмма строится для каждого студента и позволяет комплексно оценить уровень развития гибких навыков, особенно значимых в профессиональной деятельности будущих ИТ-специалистов. Учитывая, что медиапроект разрабатывается студентами-первокурсниками в новых для них условиях, пороговое значение для каждого навыка определено равным 2 баллам. Если шестигранник с пороговым значением находится внутри шестигранников оценок, можно сделать вывод, что исследуемые гибкие навыки у студента развиты. На представленной в качестве примера диаграмме можно увидеть, что гибкие навыки освоены обучающимся не полностью. По диаграмме можно сделать вывод, что у данного студента достаточно развита самоорганизация, самообучение и навыки проектной работы.

Анализ

• •* • Порог

ИНСТРУМЕНТАРИЙ ОЦЕНКИ СФОРМИРОВАННОСТИ ГИБКИХ НАВЫКОВ СТУДЕНТОВ

ИТ-НАПРАВЛЕНИЙ – ВЗГЛЯД ИЗ БУДУЩЕГО

В то время как навыки, связанные с коммуникациями и выполнением своей роли в команде сформированы на недостаточном уровне.

Для формирования рейтинга команд баллы за выполнение заданий на каждом этапе суммируются. Рейтинг проектных команд публикуется в ленте курса на дистанционной платформе (см. Рисунок 2). Команды, наблюдая динамику изменения рейтинга от этапа к этапу, соревнуются между собой и стремятся набрать большее количество баллов.

Медиапроект выполняется студентами в третьем модуле,за-вершает изучение дисциплины «Информационные технологии» и является ее итогом. Поэтому повышенная оценка за медиапроект (и модуль соответственно) влияет на дифференцированный зачет по дисциплине,что также является дополнительной мотивацией к выполнению заданий в срок и способствует развитию самоорганизации и ответственности. Наблюдения показали, что студенты стремятся к получению максимального количества баллов, чтобы занять первое место в рейтинге,им интересны соревновательные условия – возраст первокурсников как раз тому способствует.

Дружные и ответственные команды, наилучшим образом проявляя и развивая свои личностные качества и гибкие навыки, творческие способности и таланты, действуют активнее, предлагают креативные идеи. Студенты, чьи команды, набрали менее всего баллов, обладают низким уровнем коммуникации, самообучения и самоорганизации, что также подтверждалось результатами тестирования и учебными результатами по другим дисциплинам. Лучшие студенческие видеофильмы публикуются автором в социальной сети (ВКонтакте в группе СибLife. URL: https:// для ознакомления, голосования, обмена мнениями. Факт публикации в медиапространстве и количество голосов за медиапродукт косвенно могут служить оценкой гибких навыков студенческих команд, поскольку наилучший медиапродукт может создать слаженная и ответственная команда, в которой четко распределены роли и есть лидер.

Медиаобразовательные проекты с распределением ролей в команде являются достаточно актуальной и практичной формой развития гибких навыков.

«Взгляд из будущего» на годы обучения с позиции дипломированного специалиста предоставил автору возможность оценить процесс обучения по ИТ-направлениям, результаты которого будут востребованы уже завтра. Подводя итог, отметим, что развитые гибкие навыки являются важным фактором подготовки конкурентоспособных кадров для цифровой экономики. Формирование комплексной системы обучения, основанной на проектном подходе, развивающей гибкие навыки с привлечением средств медиасреды, значительно увеличит качество подготовки ИТ-кадров, способных к слаженной командной работе, разработке и внедрению высокотехнологичных программных комплексов, управлению проектами, мыслящих системно, критически и креативно.

Рисунок 2 . Рейтинг команд на 1–4 этапах медиаобразовательного проекта

Список литературы Инструментарий оценки сформированности гибких навыков студентов ИТ-направлений - взгляд из будущего

  • Деева Н.А. Методика «жизненная успешность»: структура и валидизация // Психология. Журнал Высшей школы экономики. 2022. Т. 19, № 3. С. 494–520. DOI: 10.17323/1813-8918-2022-3-494-520
  • Илларионова В.И. Соловьева А.А., Федорова Т.Н. Проектная деятельность и ее роль в повышении мотивации к чтению у обучающихся // Русский язык и литература в современном образовательном пространстве: диалог культур. Мат. междунар. науч.-практ. конф. Якутск, 19–21 ноября 2017 года; под ред. Т.А. Бердниковой и др. Чебоксары: ЦНС «Интерактив плюс», 2018. С. 154–155.
  • Исаева С.Э., Оказова З.П. Организация проектной и исследовательской деятельности учащихся в современной школе // Азимут научных исследований: педагогика и психология. 2018. Т. 7, № 3 (24). С. 112–114.
  • Калязина Е.Г. Цифровой менеджмент в управлении проектами // Креативная экономика. 2021. Т. 15, № 12. С. 4747–4766. DOI: 10.18334/ce.15.12.113858
  • Каракозов С.Д., Худжина М.В., Борисов С.Б., Бутко Е.Ю. Организация взаимодействия вуза с работодателями при обучении студентов разработке и реализации ИТ-проектов // Информатика и образование. 2019. № 9 (308). С. 20–28. DOI: 10.32517/0234-0453-2019-34-9-20-28
  • Касьянова Е.В., Сафонов К.В. Методика развития медиакомпетенций студентов посредством медиаобразовательных проектов // Вестник красноярского государственного педагогического университета им. В.П. Астафьева. 2020. № 2 (52). С. 46–57. DOI: 10.25146/1995-0861-2020-52-2-199
  • Касьянова Е.В., Сафонов К.В. Особенности формирования ИКТ-компетенцтности будущих ИТ-инженеров посредством медиаобразовательных проектов // Мир науки, культуры, образования. 2021. № 4 (89). С. 201–204. DOI: 10.24412/1991-5497-2021-489-201-204
  • Лазарев В.С. Проектная деятельность в школе: неиспользуемые возможности // Вопросы образования. 2015. № 3. С. 292–307. DOI: 10.17323/1814-9545-2015-3-292-307
  • Липаев В.В. Экономика программной инженерии заказных программных продуктов. М.: МАКС Пресс, 2014. 308 с.
  • Статья 1263. «Аудиовизуальное произведение» Гражданского Кодекса РФ с комментариями 2019–2020 года (новая редакция с последними изменениями) (протокол от 18.12.2006 № 230-ФЗ (ред. От 13.06.2023). URL: https://grazhdanskiy-kodeks.ru/1263.
  • Тарханова И.Ю., Белкина В.В., Макеева Т.В. и др.; под науч. ред. И.Ю. Тархановой. Измерение и оценка сформированности универсальных компетенций обучающихся при освоении образовательных программ бакалавриата, магистратуры, специалитета. Ярославль: РИО ЯГПУ, 2018. 383 с.
Еще
Статья научная