Описание возможностей программных комплексов TestMaker и Moodle по контролю знаний

На сегодняшний день в России, как и во всем мире, стремительно развиваются информационные технологии, в том числе в сфере обучения и контроля знаний. На фоне информатизации системы образования, распространения дистанционного обучения, развития технологий управления персоналом актуальной является задача разработки автоматизированных информационных систем, позволяющих объективно и быстро оценивать знания, умения и навыки обучаемых. Достижения теории педагогических измерений выдвигают на первый план использование в компьютерных системах педагогических тестов, что было реализовано в эксперименте по проведению единого государственного экзамена. В то же время сейчас активно развивается концепция интеллектуального тестирования и контроля знаний, которая предполагает «интеллектуализацию» процесса тестирования за счет использования определенных математических моделей и алгоритмов, технологий искусственного интеллекта, имитации взаимодействия преподавателя и обучаемого.

Функциональные возможности и типы вопросов в TestMaker и Moodle

TestMaker – это программа для создания тестов. Возможно использовать неограниченное количество вопросов, ответов и тем. TestMaker состоит из тестирующей оболочки TestMaker_User и редактора тестов TestMaker_Admin. Программа проста в использовании, имеет удобный интерфейс.[1-5].

Moodle – это среда дистанционного обучения, предназначенная для создания качественных дистанционных курсов. Система бесплатна, предоставляет множество различных обучающих функций, удобна и проста в использовании, что позволяет ей быть используемой более чем в 200 странах мира. Система находится в свободном доступе на сайте разработчика [6]

Элемент курса «Тест» позволяет преподавателю создавать тесты, состоящие из вопросов разных типов: Множественный выбор, Верно/неверно, На соответствие, Короткий ответ, Числовой. Можно создать тест с несколькими попытками, с перемешивающимися вопросами или случайными вопросами, выбирающимися из банка вопросов. Может быть задано ограничение времени.

Каждая попытка оценивается автоматически, за исключением вопросов Эссе, и оценка записывается в журнал оценок.

Можно выбрать, будут ли подсказки, отзыв и правильные ответы и когда они будут показаны студентам.

Тесты могут быть использованы:

• •    В экзаменах курса

• •    Как мини-тесты для прочитанных заданий или в конце темы

• •    В итоговом экзамене, используя вопросы из промежуточных экзаменов

• •    Для обеспечения немедленного отзыва о работе

• •    Для самооценки

Функциональные возможности программного комплекса Moodle:[7,8].

• ✓    на 100% подходит для организации online-классов, а также подходит для организации традиционного обучения;

• ✓    система дистанционного обучения Moodle является: простой, легкой, эффективной, совместимой с различными продуктами, предъявляя невысокие требования к браузеру;

• ✓    большинство страниц могут быть отредактированы с помощью встроенного редактора;

• ✓    возможен поиск по дистанционным курсам

Функциональные возможности программного комплекса TestMaker для компьютерного тестирования:[1-5].

• ✓    поддержка форматирования текста вопроса;

• ✓    использование изображений и любых OLE-объектов;

• ✓    быстрое переключение в режим просмотра создаваемого теста в режиме обучаемого.

Типы вопросов Moodle:

• 1.    Множественный выбор

• 2.    Верно/неверно

• 3.    На соответствие

• 4.    Краткий ответ

• 5.    Числовой ответ

• 6.    Эссе

• 7.    Вложенные ответы(Cloze)

• 8.    Перетащить на изображение

• 9.    Перетаскивание в текст

• 10.    Перетаскивание маркеров

• 11.    Выбор пропущенных слов

• 12.    Вычисляемый

• 13.    Простой вычисляемый

• 14.    Множественный вычисляемый

• 15.    Случайный вопрос на соответствие

• 16.    Описание

Типы вопросов TestMaker:

• 1.    Выбор одного правильного ответа

• 2.    Выбор нескольких правильных ответов

• 3.    Поиск соответствия

• 4.    Открытый вопрос (запрос ввода пропущенного текста)

• 5.    Расширенный открытый вопрос

Сравнение типов вопросов:

• • Выбор нескольких правильных ответов (Множественный выбор).

TestMaker: Закрытый многозначный вопрос похож на закрытый однозначный вопрос за исключением того, что правильных ответов может быть несколько (или ни одного). Имеется возможность указать любое число вариантов ответа, и любые из них могут быть правильными. (Рис.1)

Рис.1. Выбор нескольких правильных ответов в среде TestMaker

Moodle: Позволяет выбирать один или несколько правильных ответов из заданного списка.(Рис.2)

Вопрос 15

Пока нет ответа

Балл: 1,00

f Отметить вопрос

0 Редактировать вопрос

Перцептрон состоит из детерминистских пороговых НПЗ нескольких типов. Выделите правильные типы НПЗ

Выберите один или несколько ответов:

• □    а. Решающие(Р-элементы)

• □    Ь. Принимающие(П-элементы)

О с. Сенсорные (С-элементы)

О d. Поставляющие(П-элементы)

• □    е Ассоциативные(А-элементы) О f Разрешающие(Р-элементы)

Далее

Рис. 2. Выбор нескольких правильных элементов в среде Moodle

• •    Выбор одного правильного ответа.

TestMaker: Закрытый однозначный вопрос представляет собой набор вариантов ответа, из которых только один правильный, а остальные неправильны, неточны или неполны. Имеется возможность указать любое число вариантов (сколько поместится на экран).(Рис. 3)

Рис.3. Выбор одного правильного ответа в среде TestMaker

Moodle: Не является отдельным типом вопроса, так как его можно смоделировать как вопрос на множественный выбор.(Рис.4)

Вопрос 1        Чему равна максимальная частота импульсацин нейрона?

Пока нет ответа

Выберите один ответ:

Балл: 1,00

О а. 360

^ Отметить вопрос               О в- 160

£ Редактировать      ' -  С, 200

вопрос               Q d. 180

Далее

Рис.4. Выбор одного правильного ответа в среде Moodle

• •    Поиск соответствия.

TestMaker: Вопрос на соответствие представляет собой три списка. Требуется найти соответствие между элементами левого списка и элементами правого списка (щелкнуть мышью сначала на левый, затем на правый элементы). Ответ автоматически занесется в верхний список. Из верхнего списка правильный ответ можно удалить двойным щелчком. Один элемент любого списка может иметь несколько соответствий из другого или не иметь ни одного. Ответ на вопрос считается правильным, если указаны все заданные соответствия и не указаны ложные соответствия. Порядок ответа не играет роли. Удаленные двойным щелчком ответы из верхнего списка не учитываются. Количество вариантов, как в левом, так и в правом списках не ограничено.(Рис.5)

Рис. 5. Поиск соответствия в среде TestMaker

Moodle: Ответ на каждый из нескольких вопросов должен быть выбран из списка возможных. Минимальное количество вопросов 2, а ответов 3. Каждый вопрос имеет выпадающее меню в котором все варианты ответов. Ответ на вопрос считается правильным, если указаны все заданные соответствия и не указаны ложные соответствия.(Рис. 6)

вопрос 3          Найдите соответствие

Пока нет ответа

Балл: 1,00           Черный Выберите... *

<> Редактировать красный Выберите, вопрос

| ДалееРис.6. Поиск соответсвия в среде Moodle

• •    Расширенный открытый вопрос (Краткий ответ).

TestMaker: Этот элемент несколько более сложен, чем обычный открытый вопрос. Основное отличие заключается в формировании поля «Ответ» (это некоторая структура со своим алфавитом, грамматическими конструкциями и соответствующим алгоритмом проверки правильности ответа обучаемого). Расширенный открытый вопрос в отличие от обычного открытого вопроса может быть многострочным (в виде простой фразой на естественном языке). В расширенном открытом вопросе отсутствует возможность игнорирования опечаток. (Рис. 7)

Рис.7. Расширенный открытый вопрос в среде TestMaker

Moodle: Позволяет вводить в качестве ответа одно или несколько слов. Ответы оцениваются путем сравнения с разными образцами ответов, в которых могут использоваться подстановочные знаки. Недостатком является то, что варианты ответа с орфографическими ошибками считаются неверными.(Рис. 8)

Вопрос4

Пока нет ответа

Балл: 1,00

^ Отметить вопрос

Ф Редактировать вопрос

Как называется выходной импульс генерируемый в результате сложного-химического процесса?

Ответ

Далее

Рис.8. Расширенный открытый вопрос в среде Moodle

• •    Открытый вопрос.

TestMaker: Открытый вопрос представляет собой поле редактора, в которое требуется вписать некоторую строку. Эта строка и будет считаться ответом на поставленный вопрос. Можно задать текст, которым поле будет заполняться по умолчанию при его отображении. При выборе «Допускать опечатку» варианты ответа с орфографическими ошибками засчитываются верными. (Рис. 9)

Рис. 9. Открытый вопрос в среде TestMaker

Moodle: Не является отдельным типом вопроса, так как его можно смоделировать как вопрос на короткий ответ. Недостатком является то, что варианты ответа с орфографическими ошибками считаются неверными. (Рис. 10)

Вопрос 4                                                                                                             „

Как называется выходной импульс генерируемый в результате сложного-хнмнческого процесса?

Пока нет ответа

Балл: 1,00

^ Отметить Ответ вопрос

0 Редактировать вопрос

Далее

Рис. 10. Открытый вопрос в среде Moodle

• •    Верно/Неверно.

TestMaker: Не является отдельным типом вопроса, так как его можно смоделировать как вопрос на выбор одного правильного ответа путем создания двух ответов типа “Выбор одного правильного ответа”.(Рис. 11)

Рис.11. Вопрос типа «Верно/Неверно» в среде TestMaker

Moodle: Простая форма вопроса «Множественный выбор», предполагающая только два варианта ответа: «Верно» или «Неверно».(Рис. 12)

ВопросZ

Пока нет ответа

Балл: 1,00

^ Отметить вопрос

НС с прямыми связями (feedforward), в которой имеется несколько слоев НПЭ с настраиваемыми весами связей называется многослойный перцептрон

Выберите один ответ:

ф Редактировать q Верно вопрос

G Неверно

Далее

Рис. 12. Вопрос типа «Верно/Неверно» в среде Moodle

• Числовой ответ.

TestMaker: Не является отдельным типом вопроса, так как его можно смоделировать как вопрос на открытый вопрос путем задания ответа в числовом виде.(Рис. 13)

Рис. 13. Числовой ответ в среде TestMaker

Moodle: Позволяет сравнивать числовые ответы с несколькими заданными вариантами с учетом единиц измерения. Возможен и учет допустимых погрешностей.(Рис. 14)

Вопрос 5         Сколько стадий обучения многослойного перцептрона?

Пока нет ответа

Балл: 1,00          Ответ ij? Отметить вопрос ft Редактировать вопрос

Далее

Рис. 14. Числовой ответ в среде Moodle

• •    Вложенные ответы.

TestMaker: Не является отдельным типом вопроса, так как его можно смоделировать как вопрос содержащий все типы вопросов. Недостатком является то, что при неправильном ответе на один из вложенных вопросов неправильным будет засчитан весь ответ.(Рис.15)

Рис.15. Вложенные ответы в среде TestMaker

Moodle: Вопросы такого типа являются очень гибкими, но могут быть созданы только путем ввода текста со специальными кодами, которые создают встроенные вопросы «Множественный выбор», «Числовой ответ» и «Короткий ответ».(Рис. 16)

Рис. 16. Вложенные ответы в среде Moodle

• Перетащить на изображение.

TestMaker: Невозможно реализовать в данной среде.

Moodle: Изображение или текст необходимо перетащить в зону на фоновом изображении. (Рис. 17)

Рис. 17. Тип «Перетащить на изображение» в среде Moodle

• Перетаскивание в текст.

TestMaker: Невозможно реализовать в данной среде.

Moodle: Пропущенные слова в тексте заполняются с помощью перетаскивания. (Рис.17)

Вопрос 8

Пока нет ответа

Балл: 1,00

^ Отметить вопрос ф Редактировать вопрос

Перетащите | Вариант 1 | в текст ||

| варианта^

далее

Рис. 17. Тип «Перетаскивание в текст» в среде Moodle

• •    Перетаскивание маркеров.

TestMaker: Невозможно реализовать в данной среде.

Moodle: Маркеры перетаскиваются на фоновое изображение. (Рис. 18)

Рис. 18. Тип «Перетаскивание маркеров» в среде Moodle

• •    Выбор пропущенных слов.

TestMaker: Не является отдельным типом вопроса, так как его можно смоделировать как вопрос «Выбор одного правильного ответа» или «Поиск соответствия».(Рис. 19)

Классификация задач.

• 1)    - при решении информация лишь отбирается из БД, которая необходима для принятия решений, при этом указывается условие отбора информации

• 2)    - связаны с решением систем уравнения, решением дифференциальных уравнений, определением логических алгоритмов выражений.

• 3)    - позволяют найти оптимальные значения параметров из заданного ОДЗ, определяют уравнение относительно заданных критериев.

Поисковые задачи

Расч етн ы е, вы ч и сл ител ь н ы е задач и

Организационные задачи

Рис. 19. Выбор пропущенных слов в среде TestMaker

Moodle: Пропущенные слова в тексте заполняются с помощью выпадающего меню.(Рис. 20)

Вопрос 10        Выбор ¹ пропущенных слов '

Пока нет ответа

Балл: 1,00

if* Отметить вопрос ф Редактировать вопрос

Далее

Рис. 20. Выбор пропущенных слов в среде Moodle

• •    Вычисляемый.

TestMaker: Невозможно реализовать в данной среде.

Moodle: Вычисляемые вопросы подобны числовым вопросам, только в них используются числа, которые случайно выбираются из набора при прохождении теста.(Рис. 21)

Вопрос 13

Пока нет ответа

Балл: 1,00

if* Отметить вопрос ф Редактировать вопрос

| Далее |

Рис. 21. Тип «Вычисляемый» в среде Moodle

• •    Простой вычисляемый.

TestMaker: Невозможно реализовать в данной среде.

Moodle: Более простая версия вычисляемых вопросов, которые подобны числовым вопросам, но с использованием чисел, выбираемых случайным образом из определенного набора при прохождении теста.

• •    Множественный вычисляемый.

TestMaker: Невозможно реализовать в данной среде.

Moodle: Множественные Вычисляемые вопросы устроены так же, как вопросы типа «Множественный выбор», с тем отличием, что ответами в них служат числовые результаты формул. Значения в формулах выбираются из заранее определенного набора значений случайным образом при прохождении теста.

• •    Случайный вопрос на соответствие.

TestMaker: Невозможно реализовать в данной среде

Moodle: Подобен вопросу «На соответствие», но создается из вопросов типа «Короткий ответ», выбираемых случайным образом из конкретной категории. (Рис.22)

Сгп'айные вопросы привет Пыберкге *

Дзпе*

Рис. 22. Случайный вопрос на соответствие в среде Moodle

• Описание.

TestMaker: В данной системе есть возможность создания такого пояснения. Недостатком является то, что данный тип будет рассматриваться в TestMaker как вопрос и будет засчитывать ответ на него, как правильный, что может повлиять на результат тестирования.(Рис. 23)

Рис. 23. Описание в среде TestMaker

Moodle: Используется для добавления инструкций, рубрик или другого содержимого в тесте. Подобен ресурсу «Пояснение» на странице курса.(Рис. 24)

^ Отметить Описание следующих вопросов вопрос

$ Редактировать вопрос

Далее

Рис.24. Описание в среде Moodle

• •    Эссе.

TestMaker: Невозможно реализовать в данной среде

Moodle: Подобен вопросу «На соответствие», но создается из вопросов типа «Короткий ответ», выбираемых случайным образом из конкретной категории.(Рис.25)

Рис. 25. Эссе в среде Moodle

Этот тип вопроса не является системой автоматизированного компьютерного контроля знания.

Достоинства и недостатки систем.

Перечислим основные достоинства Moodle для компьютерного тестирования:[8].

• 1.    аутентификация и авторизация пользователей;

• 2.    распределение полномочий;

• 3.    ограничение по времени (ограничение по времени прохождения теста, ограничение на доступность теста обучаемым);

• 4.    возможность создания базы вопросов и указывать категории вопросов;

• 5.    выкладки материалов, поддерживающая специфические виды контента;

• 6.    ограничение на попытки прохождения теста;

• 7.    установление пароля на тест;

• 8.    анализ и хранение результатов;

• 9.    возможность создания теста по одному курсу для определенных групп;

• 10.    распространяется бесплатно.

Основные недостатки Moodle для компьютерного тестирования:[8].

• 1.    у пользователей часто возникают проблемы с получением качественной технической поддержки, следовательно, вузы сталкиваются с необходимостью иметь в штате высококвалифицированного специалиста по Moodle для развертывания и поддержания системы;

• 2.    многие преподаватели озабочены проблемой нарушения авторских прав, т.к. либо их уникальные материалы могут быть неправомерно использованы другими, если курс находится в открытом доступе для всех желающих;

• 3.    существуют также возможности, позволяющие пользователям получить доступ к чужой частной информации;

• 4.    сложна для освоения;

• 5.    требовательна к серверу;

• 6.    для расширения функционала или исправления возникающих в системе программных ошибок может понадобиться помощь профессионалов;

Перечислим основные достоинства TestMaker для компьютерного тестирования:[1-5].

• 1.    для мобильности системы TestMaker необходимо сделать копии на какой-либо носитель, либо в облачное хранилище данных.

• 2.    имеет интуитивно понятный и легко усваиваемый интерфейс;

• 3.    программный комплекс TestMaker универсален и работает в любой операционной системе. TestMaker занимает небольшой объем памяти на съемных носителях, либо в облачных хранилищах данных. Объем занимаемой памяти программным комплексом TestMaker зависит от наличия графических объектов и количества вопросов (без учета тестов -1,21 Мб);

Задания в TestMaker и Moodle оценивают только текущие теоретические знания, без возможности индивидуального подхода обучения к тем задачам, в которых обучающийся ошибся. Зачастую оба программных комплекса предлагают для обучаемого тесты, не соответствующие текущим навыкам обучаемого (слишком легкие или слишком трудные). В них нет возможности проследить на какой именно операции обучаемый допустил ошибку, а значит, очень трудно определить какими навыками он владеет, возможно, только в общих чертах оценить общий уровень знаний в зависимости от предполагаемой сложности теста. Выбор конкретной среды или программы зависит от целей тестирования, уровня подготовки разработчика в области владения компьютером, выбора типов тестовых заданий.

Заключение

Оба комплекса являются хорошими программными продуктами, в которых остро нуждаются образовательные учреждения. Применение компьютерных технологий характеризует уровень постановки учебного процесса. Задача организации инновационного обучения неразрешима без широкого внедрения компьютерных технологий в учебный процесс. Данный подход, в первую очередь, должен быть использован при контроле эффективности и качества обучения. Программные комплексы TestMaker и Moodle в настоящий момент являются наиболее доступным средством разрешения этого вопроса.

Работа выполнена под научным руководством доцента кафедры АСОИУ КНИТУ-КАИ Галеева И.Х.