Автоматизированное тестирование как способ оценивания уровня сформированности компетенций студентов на основе исследования действием

DOI:

•< m

m

П остановка проблемы. С принятием изменений в Закон Российской Федерации «Об образовании» в 2009 году стали разрабатываться стандарты нового поколения - федеральные государственные образовательные стандарты высшего образования, в основу которых положен компетентностью подход. Ком-

уровней сформированности компетенций студентов в процессе освоения дисциплин.

В статье предложен способ автоматизированного тестирования студентов с целью оценивания уровней сформированности компетенций студентов в процессе обучения дисциплине.

Формирование компетенций осуществля-

петенции формируются в процессе освоения основной образовательной программы, в том числе предметной подготовке, и представляют собой комплексные характеристики. Такая комплексность результата теоретического обучения может быть получена при реализации междисциплинарного подхода к обучению. Это обусловливает ряд проблем в области методики обучения дисциплинам, в том числе и диагностики

ется при сочетании различных методов обучения. Лекционные материалы отрабатываются на практике, конкретизируются в ходе самостоятельной работы и проверяются в процессе текущего контроля успеваемости. Для осуществления контроля необходима эффективная система оценивания, которая позволит улучшить обучение студентов. Важно при этом на каждом этапе обучения получить надежную информацию о

том, как идет процесс обучения и что нужно сделать для улучшения этого процесса.

Обзор научной литературы проведен на основе анализа работ в этой области.

Тестирование стало основой оценивания уровня сформированности знаний в современной системе образования. На эту тему проведено ряд исследований [Вербицкий, 1991; Челыш-кова, 2002; Аванесов, 2005; 2010; Михайлычев, 2001; Майоров, 2002; Морев, 2004; Маграно-ва, 2006; Переверзев, 2005; Шамова и др., 2008; Кевля, 2009; Мухаметзянова, 2012; Использование тестов…, 2017; Педагогические тесты…, 2018; и др.].

В связи с переходом на новые образовательные стандарты предметом исследования многих авторов становится тема оценивания полноты состава освоенных студентами компетенций в вузе [Шкерина и др., 2013; Денисенко, 2014; Мартынов, Бронов, 2017; Бронов и др., 2018; Сысоева, 2018].

Многие авторы считают, что одним из важных тактических принципов при выстраивании системы оценивания компетенций студентов является «исследование действием». «Исследование действием» предполагает циклический процесс. Цель этого процесса - улучшить соответствующую практику оценивания. Этапы процесса - планируй - действуй - наблюдай - размышляй (и вновь: планируй и т.д.) [Kemmis, McTaggart, 1988 a, b].

У истоков изучения и применения принципа «исследование действием» при решении задач улучшения работы организации стоят Курт Левин и его коллеги [Lewin, 1939].

В своих работах E.F. Calhoun указывает, что сегодня «исследование действием» остается мощным инструментом как для улучшения работы, так и для здоровья организации [Calhoun, 1992].

Когда инициируется процесс совершенствования образовательной организации в целом, «исследование действием» изменяет контекст и способствует коллективной работе, так что профессиональная экспертиза совершенствуется и распространяется в организации, помогая соз- дать сильное обучающее профессиональное сообщество [Calhoun, 2002].

Джон Биггс рекомендует активно применять «исследование действием» на уровне взаимодействия преподаватель - студент. В своих работах он сравнивает новый подход к оцениванию результатов обучения с традиционной моделью, так называемой «измерительной моделью». Измерительная модель изначально была разработана психологами для измерения индивидуальных характеристик и способностей и показывала результаты измерений по шкале, чтобы можно было сравнивать индивидуальные показатели. Это можно использовать в исследовательских целях, например, сказать, насколько аномальна способность данного человека к чтению, но эта модель была также применена для оценивания результатов обучения. Как подчеркивает Биггс, в рамках измерительной модели деятельность оценивается в отрыве от процесса обучения.

По мнению Биггса, измерительная модель актуальна и в настоящее время по следующим причинам:

• –    привычка, традиции (эта модель всегда хорошо работала и т.п.);

• –    бюрократическое удобство (работать с цифрами проще, чем оценивать, насколько «выровнена» модель обучения и т.п.;

• -    удобнее преподавателю (например, проще сравнивать оценки);

• -    убеждение в адекватности измерительной модели [Biggs, Tang, 2011].

Методология исследования предполагает выбор правильных тактических принципов при выстраивании системы оценивания. Выбор методов оценивания выполняет важную функцию и оказывает большое влияние на учебу, на мотивацию студентов в ходе обучения.

Система оценивания должна быть нацелена на совершенствование процесса обучения. Ее целью должно быть оценивание для улучшения результатов, а не для наказания. Задача системы оценивания – постоянно перепроверять, как идет выполнение поставленных целей, формирование компетенций.

Выбор методов оценки в рамках компе-тентностной модели. Цели обучения, методическое обеспечение и подтверждение сфор-мированности компетенций составляют единое целое. Соответственно, выбор методов оценивания выполняет важную функцию и оказывает большое влияние на мотивацию студентов к учению. Традиционный подход к оцениванию результатов обучения сравнивает студентов друг с другом по фактическим оценкам и тем самым стимулирует скорее конкуренцию, чем постоянное улучшение результатов обучения. При итоговом оценивании значимость полученных оценок часто переоценивается, а значение направляющей роли преподавателя в процессе обучения недооценивается.

В рамках результат-ориентированной модели при создании системы оценивания результатов обучения необходимо использовать студенто-центрированный подход. При этом цель – мотивировать студентов к получению оптимальных результатов обучения, в частности путем самостоятельной работы.

Подтверждение формирования компетенций – сложный процесс, включает три основных фазы: планирование, реализацию, оценивание адекватности выстроенной системы оценивания.

Для планирования важно определить учебные цели (формирование конкретных компетенций). Цели определяют стратегию создания системы оценивания уровня сформированности компетенций и задают критерии оценки. Задача системы оценивания - постоянно перепроверять, как идет выполнение поставленных целей, формирование компетенций.

Формы и методы оценивания должны быть в полном соответствии с целями, иначе самостоятельная работа будет нерезультативна. Формы и методы оценивания зависят от того, на каком этапе процесса обучения преподаватель проверяет, как идет процесс формирования компетенций.

Например, цель итогового оценивания по завершении прохождения темы - проверить, насколько сформированы ключевые компетенции.

Важно при этом, чтобы студенты знали и понимали, как выстраивается стратегия оце- нивания, которая используется в рамках учебной программы. На каком основании выстроена стратегия оценивания? Что ожидается от студентов? Каковы основные методы оценивания? По каким критериям будут оцениваться уровни сформированности компетенций?

Оценивание формирования компетенций проводится по определенным критериям и предполагает:

– текущее оценивание;

– самооценку;

– оценивание процесса.

Текущее оценивание, в отличие от итогового, подчеркивает необходимость постоянно оказывать студенту поддержку в процессе обучения – показать, где пробелы, на что обратить внимание и т.п.

При самооценке ответственность за результат обучения передается студенту.

Оценивание процесса необходимо для того, чтобы определить, насколько эффективно идет процесс обучения. Оно зависит от того, какие цели преподаватель намеревается достичь в процессе обучения.

Результаты исследования. Система автоматизированного тестирования, созданная на основе принципа «исследование действием», может результативно использоваться как инструмент, помогающий студенту в освоении дисциплины.

Для оценки сформированности компетенции с помощью системы автоматизированного тестирования при обучении определенной дисциплине предлагается использовать тесты из вопросов трех типов, ориентированных на оценивание уровней освоения знаний, умений и навыков соответственно. При этом результат прохождения i -го теста k -го испытания представляется в виде (а*, ^, у,^к ), где а*, p^.y* - элементы двоичного множества (0; 1).

По результатам нескольких тестов формируется обобщенный результат k -го испытания:

(ссМГ.уЧО < ссУ^У ^ 1.

Рассматривая как истинностное значение трехзначной логики (истинно, ложно, неопределенно), получаем решетку с частичным отношением порядка.

S

и

Форма представления обобщенного результата тестирования согласуется с методом оценки и определяется целями тестирования. Цель текущего тестирования – указать студенту на его пробелы. Имеет смысл провести сравнение с предыдущими испытаниями.

В результате итогового тестирования студент должен достичь установленного порогового уровня.

Заключение. В статье обоснован выбор методов оценки уровней сформированности компетенций. При выстраивании системы оценивания предлагается ориентироваться на «правильные» тактические принципы. Формы и методы оценивания должны быть в полном соответствии с целями и этапами обучения. Задача системы оценивания – постоянно перепроверять, как идет выполнение поставленных целей, формирование компетенций для того, чтобы управлять этим процессом и мотивировать студентов к получению оптимальных результатов обучения.