Педагогические тесты в современном образовательном процессе, их классификация

В настоящее тестовые технологии контроля учебных достижений обучающихся получили широкое применение. При создании тестовых заданий их авторы должны полагаться не только на собственную интуицию и педагогический опыт, но и на передовые зарубежные и отечественные наработки в области тестовых технологий.

Как в нашей стране, так и за рубежом существуют несколько школ педагогических измерений [1]. Такие известные тестовые системы как TOEFL, SAT, GRE, GMAT основывают свою деятельность на классической тестовой теории и современной теории тестов (IRT – Item Response Theory) и разработаны американской специализированной организа- цией ETS – Educational Testing Service. Их многолетний опыт по разработке и оценке качества тестовых заданий является существенным вкладом в теорию и в практику педагогических измерений. Большой вклад в развитие практики и технологии тестового контроля в нашей стране внесли создатели и разработчики Единого государственного экзамена. Их методический, технологический и практический опыт являются фундаментом дальнейшего развития педагогических измерений в российском образовании.

Также следует отметить современную тенденцию использования технологии адаптивного тестирования.

Анализ зарубежной и отечественной литературы показывает, что существуют несколько подходов к решению проблемы классификации педагогических тестов.

Во-первых, педагогические тесты в системе среднего и высшего профессионального образования подразделяются на вступительные, текущие, тематичес- кие, а также на тесты промежуточной и итоговой аттестации. Во-вторых, педагогические тесты по своему содержанию различаются на гомогенные и гетерогенные. В-третьих, педагогические тесты классифицируются по методологии интерпретации результатов тестирования на нормативно-ориентированные и критериально-ориентированные. В-четвертых, по формату предъявления педагогические тесты различаются на бланковые, когда испытуемому предоставляется распечатка теста на бумаге, и на компьютерные. В-пятых, педагогические тесты можно различать по масштабу применения на авторские, академические, отраслевые, национальные и международные.

Приведем краткое описание различных видов педагогических тестов.

Классифицируя уровни педагогического тестового контроля в системе профессионального образования, можно выделить: входной, текущий, тематический, промежуточный и итоговый (рис. 1).

Рис. 1. Классификация педагогических тестов по уровню контроля

Входной контроль – вступительные испытания – проводится для оценки уровня и качества подготовки абитуриентов с целью выявления их потенциальных возможностей обучения по выбранной специальности. В настоящее время в связи с внедрением Единого государственного экзамена совмещаются выпускные школьные и вступительные испытания в высшее или среднее профессиональное учебное заведение РФ.

Текущий контроль – самый распространенный метод получения оперативной информации о соответствии знаний обучаемых планируемым эталонам усвоения. Текущий контроль характеризует- ся дидактической целью отслеживания хода обучения. Эта информация создает условия для своевременной коррекции процесса усвоения знаний, умений и навыков обучаемыми, помогает педагогу перестроить в нужном направлении учебный процесс. Текущий тестовый контроль может осуществляться в ходе повседневной учебной работы с помощью нескольких вариантов теста, разработанного самим преподавателем. Этот вид контроля имеет большое значение для стимулирования у обучаемых стремления к систематической самостоятельной работе, для повышения ответственности за результаты обучения.

Тематический контроль выявляет степень усвоения раздела или темы учебной программы. В тематическом контроле наиболее интересна информация, дающая представление о сравнительной динамике усвоения обучаемыми разных учебных групп материала раздела или темы.

Назначение п ромежуточного контроля сводится, в основном, к выявлению результатов определенного этапа обучения. В этом случае оценка уровня подготовки обучаемых производится с помощью тестов после изучения логически законченной части (раздела, темы) программы или в конце определенного календарного учебного периода (месяца, семестра, курса). Он состоит в проверке учебной деятельности студентов по освоению сравнительно большего объема материала. Поэтому к промежуточному педагогическому тесту предъявляются повышенные требования. Он должен обладать достаточно высокой надежностью и валидностью. К его разработке должны привлекаться наиболее опытные преподаватели.

Одна из важных сфер осуществления итогового контроля в системе профессионального образования – аттестация выпускников. В сфере образования под аттестацией понимается процедура установления соответствия уровня и качества подготовки выпускников общепризнанной, документально зафиксированной системе требований к уровню и к качеству образования. Различные виды аттестации предполагают использование разных систем контроля. При итоговой аттестации выпускников роль общепризнанной нормы играют требования Государственных образовательных стандартов. Процедура аттестации допускает использование различных форм и методов контроля, среди которых наиболее важное место по праву отводится научно обоснованным тестам. Тесты открывают новые возможности в процессе аттестации, поскольку именно они обеспечивают оценки, обладающие необходимыми свойствами: обоснованностью, объективностью и сопоставимостью. Итоговый аттестационный педагогический тест должен обладать высокой содержательной валидностью и полностью соответствовать Государственному образовательному стандарту по специальности. Разрабатывать такой вид теста должны опытные преподаватели и методисты по руководством профессиональных тес-тологов. Процесс разработки итогового теста должен проходить централизованно и включать в себя все научно-обоснованные этапы создания педагогического теста. При формулировке тестовых заданий следует предусмотреть возможность получения в ответах студентов исчерпывающей информации как об уровне приобретенных и усвоенных знаний, так и об умении оперировать ими, об овладении логическими приемами мышления (анализа и синтеза, доказательства, аналогии и противопоставления, индукции и дедукции и др.).

Тесты классифицируются также на основании включенного в педагогическое измерение содержания (рис. 2).

Рис. 2. Классификация педагогических тестов по содержанию

Гомогенный педагогический тест основывается на содержании какой-либо одной дисциплины. При его разработке авторы должны четко отслеживать, чтобы каждое задание не выходило по своему содержанию за рамки данной дисцип- лины. Такой тип педагогического теста распространен в учебном процессе.

Гетерогенный педагогический тест основывается на содержании нескольких дисциплин. Гетерогенный педагогический тест является по своему существу междисциплинарным. При его разработке авторы должны представлять себе цели его создания и быть компетентными во многих дисциплинах. Естественно, что процесс формирования гетеро- генного теста значительно сложнее, чем гомогенного. Одной из разновидностей гетерогенного теста является набор гомогенных тестов (субтестов). Наиболее эффективны гетерогенные тесты при тестовом итоговом контроле студентов.

Еще одно важное основание для классификации педагогических тестов – это методология интерпретации результатов тестирования , т.е. тестовых баллов (рис. 3).

Рис. 3. Классификация педагогических тестов по методологии интерпретации результатов

Нормативно-ориентированный педагогический тест (по-английски norm-referenced test) позволяет сравнивать учебные достижения (уровень подготовки, уровень профессиональных знаний и умений) отдельных тестируемых друг с другом. Нормативно-ориентированные педагогические тесты используются для получения надежных и нормально распределенных баллов для сравнения испытуемых.

Критериально-ориентированный педагогический тест (по-английски criterion-referenced test) позволяет оценивать, в какой степени испытуемые овладели необходимым учебным материалом. Критериально-ориентированные педагогические тесты применяются для интерпретации результатов тестирования в соответствии уровнем обученности испытуемых на определенной области содержания.

Выделяют два основных вида критериально-ориентированных тестов, отличающихся друг от друга по основным характеристикам:

• •    тесты для определения уровня усвоения учебного материала (domain-referenced tests), т.е. тесты, предназначенные для оценки доли от полного объема учебного материала, которую усвоил испытуемый,

• •    квалификационные тесты или «тесты на мастерство» (mastery tests), определяющие в группе испытуемых квалифицированных и неквалифицированных в какой-то области.

Существенное значение приобретает использование критериально-ориентированных тестов для текущей, промежуточной и итоговой аттестации студентов, мониторинга успеваемости студентов. Критериально-ориентированные тесты также используются для оценки качества различных программ.

Основной задачей нормативно-ориентированных тестов является дифференцирование тестируемых. При этом, тест должен быть спроектирован таким образом, чтобы распределение результатов теста (баллов) было близким к нормальному. Для этого достаточно высокой должна быть вариативность баллов. Если же большинство тестируемых получает только низкие, только средние, или только высокие баллы, то провести дифференцирование тестируемых становится достаточно трудной задачей. Математические методы, применяемые при конструировании и оценке нормативно-ориентированных тестов, рассчитаны на нормальное распределение и основываются на корреляционном анализе. Данный тип тестов чрезвычайно полезен, когда необходима информация о тестируемом, связанная с его относительными способностями или относительной обученностью по сравнению с другими тестируемыми.

Критериально-ориентированный педагогический тест представляет собой системау заданий, позволяющую измерить уровень индивидуальных учебных достижений относительно определенного критерия, функционально связанного с полным объемом знаний, навыков и умений, которые должны быть усвоены обучаемым. Принципиально важным подобного теста является строгая и точная спецификация области содержания теста. Критерии оценивания – это минимальные стандарты оценивания, устанавливаются разработчиками теста по определенным методикам.

Нормативно-ориентированные и критериально-ориентированные тесты имеют много общего, используют одни и те же формы тестовых заданий и подобные инструкции для испытуемых. Но по методам конструирования, особенностям применения и, прежде всего, по интерпретации тестовых баллов эти два типа тестов отличаются. Основные особенности этих тестов сведены в табл. 1.

Таблица 1

Характерные особенности нормативно-ориентированных и критериально-ориентированных тестов

Особенность	Вид теста
	Нормативноориентированные тесты	Критериальноориентированные тесты
Цель тестирования	Сравнение тестируемых в области содержания теста	Аттестация тестируемых в соответствии с областью со держания теста
Интерпретация тестовых баллов	Применяются нормативные (стандартные) шкалы на основе статистики нормативной группы. Средние значения и стандартные отклонения	Индивидуальный балл тестируемого определяется как степень успешно освоенного учебного материала. Процент правильно выполненных заданий
Распределение индивидуальных баллов	Близкое к нормальному	Произвольное
Степень детализации содержания	Незначительная	Значительная

Особенность	Вид теста
	Нормативноориентированные тесты	Критериальноориентированные тесты
Наличие нормативной группы	Обязательное	Необязательное
Влияние статистических характеристик на отбор тестовых заданий	Значительное. Уровень трудности от 0.3 до 0.7, высокая дифференцирующая способность (> 0.3)	Незначительное
Методика оценки надежности тестовых заданий	Матрица сопряжения результатов, фи-коэффициент корреляции, каппа-коэффициент согласованности и т.д.	Коэффициент корреляции, метод расщепления теста на две половины, др. классические методы
Учитывание валидности теста	Содержательная и критериальная валидность	Содержательная и прогностическая валидность

Таким образом, критериально-ориентированные педагогические тесты представляют собой систему заданий, позволяющую измерить уровень учебных достижений относительно полного объема знаний, навыков и умений, которые должны быть освоены студентами. По сравнению с нормативно-ориентированными критериально-ориентированные тесты имеют ряд существенных особенностей, которые выражаются в своеобразии целей тестирования, используемых шкалах, в более подробном уровне детализации области содержания и т.д., а значит в приемах, методах и технологии разработки тестовых заданий, оценки их качества и эффективности.

Педагогические тесты также можно классифицировать по формату предъявления: бланковые (на бумажной основе) и компьютерные. Компьютерный тест может быть проведен, как в компьютерном классе, так и в дистанционном режиме (Интернет-тестирование).

Кроме того, компьютерный тест организован с использованием ординарной (традиционной) или адаптивной технологии (рис. 4).

Педагогические тесты на бумажном носителе (бланковые тесты), предъявляемые тестируемым в виде распечаток и ксерокопий, традиционны и до сих пор широко распространены у нас и за рубежом. Однако, создание, хранение, редактирование и вариативная распечатка педагогического теста в современных условиях должна происходить с помощью специализированных компьютерных программных средств. Особое внимание разработчиков и пользователей бланкового педагогического теста должно привлекать качество печати, отсутствие дефектов, грамотное расположение заданий. Результаты тестов бланкового формата могут быть обработаны в ручном режиме или с использованием специальных программ распознавания форм. С экономической точки зрения бланковые тесты продолжают оставаться наиболее доступными. Компьютерный формат предъявления педагогических тестов имеет свои особенности, которые необходимо учитывать при их разработке. Компьютеризованное тестирование имеет ряд неоспоримых преимуществ перед бланковым и наиболее перспективно в образовании.

Рис. 4. Классификация педагогических тестов по формату предъявления

На современном этапе компьютерные тесты подразделяются на ординарные и адаптивные. Ординарные (традиционные, линейные) включают в себя два основных типа тестов: с фиксированным набором заданий и с автоматизированной компоновкой вариантов.

Компьютерный тест с фиксированным набором заданий – самый простой метод предъявления. Этот неадаптивный компьютерный тестовый имеющий формат, подобный обычному бланковому, иногда упоминается в литературе как «линейное тестирование». Он имеет заранее установленную длину (т.е. количество заданий), причем этот набор заданий может предъявляться или в установленном порядке или методом случайной выборки.

Компьютерный тест с автоматизированной компоновкой вариантов создается путем выбора тестовых заданий из банка по специальному алгоритму в соответствии со спецификацией теста. Данные тесты имеют заранее установленную длину. Группа студентов получает раз- личные варианты теста, которые могут быть создаются либо перед тестированием, либо непосредственно во время его проведения.

При компьютерно-адаптивном предъявлении тестовые задания с помощью специализированного алгоритма индивидуально выбираются для каждого тестируемого. Причем этот выбор может быть основан на результатах его ответов на предыдущие задания. Цель этого типа теста состоит в том, чтобы получить высокоточную и адекватную оценку уровня подготовки каждого тестируемого по некоторой установленной шкале. Количество заданий, их типы и порядок предъявления варьируются от одного тестируемого к другому. При этом методе для каждого студента формируются уникальные тесты путем согласования трудности каждого предъявляемого задания к его постоянно оцениваемому уровню подготовки.

Компьютерный классификационный тест также является адаптивным. Однако его цель состоит в том, чтобы классифицировать тестируемых на определенные категории, вместо того, чтобы получить шкалированную оценку уровня их подготовки. В настоящее время именно компьютерно-адаптивное и компьютерно-классификационное тестирование приобретает все большее распростране- ние, особенно с развитием локальных и глобальных сетей (Интернет).

По масштабу применения педагогические тесты подразделяются на авторские (классные), академические (в образовательном учреждении), отраслевые (профессиональная аттестация кадров), национальные и международные (рис. 5).

Рис. 5. Классификация педагогических тестов по масштабу применения

В данном контексте масштаб применения означает размер выборки тестируемых. Для авторских тестов, разработчиком которых является один преподаватель, выборка невелика – от 25 до 100 студентов. Для учебного тестового контроля (академический тест) в образовательном учреждении выборка испытуемых может достигать сотен и тысяч человек.

В отраслевых тестах (для профессиональной аттестации кадров) могут принимать участие десятки, и даже сотни тысяч специалистов. Тесты в национальном масштабе привлекают сотни тысяч и миллионы экзаменуемых. Международные тесты могут оценивать уровень подготовки миллионов людей во многих странах мира.

Использование методически обоснованных структуры и формы тестовых заданий – это главный способ уменьшения нежелательных ошибок педагогического измерения, и увеличения надежности теста. Неправильное понимание назначения и вида тестовых заданий, игнорирование современной тестологической методики неизбежно приведут к ошибочным решениям о результатах тестового контроля, что может иметь серьезные последствия для студентов, ответственность за которые зачастую должны нести авторы тестовых материалов.