Критериально-ориентированный подход к оценке содержания и структуры программы развития профессиональной образовательной организации СПО
Автор: Серкова Г.Г.
Журнал: Инновационное развитие профессионального образования @journal-chirpo
Рубрика: Качество профессионального образования и рынок трудовых ресурсов
Статья в выпуске: 2 (4), 2013 года.
Бесплатный доступ
Программа развития образовательной организации - это управленческий инструмент, который определяет стратегию ее развития. Естественно, и к форме, и к содержанию Программы должны существовать определенные требования, поэтому необходимо проводить экспертизу Программы на предмет ее соответствия этим требованиям. В качестве инструментария экспертизы предлагается использование экспертных листов, разработанных на основе критериально-ориентированного подхода. Предложена историческая справка о развитии его применения. Раскрыта сущность подхода, некоторые сравнительные данные с использованием нормативно-ориентированного подхода к оценке результатов деятельности исследователя. В качестве примера приведен экспертный лист программы развития ПОО СПО
Критериально-ориентированный подход, программа развития, показатели, критерии оценки
Короткий адрес: https://sciup.org/14213470
IDR: 14213470
Текст научной статьи Критериально-ориентированный подход к оценке содержания и структуры программы развития профессиональной образовательной организации СПО
Принятие нового Федерального закона «Об образовании в Российской Федерации»; изменение модели профессионального образования, связанное с переходом на новые федеральные государственные образовательные стандарты в соответствии с Концепцией модернизации российского образования, в которой предусматривается опережающее развитие среднего профессионального образования; изменение требований рынка труда, ориентированного на инновационное развитие экономики, и в связи с этим становление современной непрерывной системы профессионального образования, системы подготовки и переподготовки профессиональных кадров — все это привело к необходимости разработки программ развития профессиональных образовательных организаций.
На основе анализа литературы по данной проблеме можно сделать вывод, что однозначного определения понятия «Программа развития образовательной организации» нет. Наиболее часто под программой понимают управленческий инструмент, который определяет стратегию развития образовательной организации, является концептуальной и организационной основой образовательной и воспитательной деятельности ПОО и предназначен для дальнейшего совершенствования и развития образовательного процесса.
Направление совершенствования определяется инновационными потребностями развития экономики региона и потребностями самой образовательной организации, в результате чего программа изначально приобретает качество инновационности. Таким образом, это — стратегический документ образовательной организации, переходящей или перешедшей в инновационный режим жизнедеятельности и принявшей за основу идеологию развития. Эту программу можно рассматривать так же, как проект системного реформирования образовательной организации, при котором инновации затрагивают существенные стороны образовательного процесса.
В настоящее время существует два основных подхода к измерениям результатов анализа инновационной деятельности: нормативно-ориентированный и критериально-ориентированный. Анализ по нормативно-ориентированному подходу ориентирован на средний результат в группе исследователей (оценки по пятибалльной системе). Однако существует и подход, отличный от нормативно-ориентированного, когда обработанные баллы интерпретируются по отношению к подготовленности самого экзаменующегося на данной области содержания, а не сравнительные способности с другими экзаменующимися из нормативной группы. В этом случае говорят о критериально-ориентированном подходе [1, 2].
Тестирование — основной метод контроля и при нормативно-ориентированном, и при критериально-ориентированном подходах.
Идея критериально-ориентированного тестирования и сам термин появились в 60-е годы нашего столетия. К этому времени нормативноориентированное тестирование развивалось уже более полувека. Начиная с 70-х годов, критериально-ориентированные тесты получили всеобщее признание и стали широко применяться в сфере образования и при профессиональной аттестации кадров.
В настоящее время они получили широкое применение в образовании, индустрии и вооруженных силах США, Великобритании, Голландии, Японии и в других развитых странах. Они обеспечивают пользователей тестов ценной информацией, причем отличной от той, которая может быть получена в результате проведения нормативно-ориентированных тестов.
Критериально-ориентированные тесты, или тесты, ориентированные на область содержания ( domain-referenced tests ), или квалификационные тесты ( mastery tests ), используются во многих образовательных учреждениях развитых стран и решают различные задачи.
Самая общая их характеристика заключается в следующем.
Нормативно-ориентированный подход (по-английски norm-referenced ) позволяет сравнивать учебные достижения (уровень подготовки, уровень профессиональных знаний и умений) отдельных испытуемых друг с другом.
Критериально-ориентированный подход (по-английски criterion-referenced ) позволяет оценивать, в какой степени испытуемые овладели необходимым материалом. Мы считаем, что использование критериально-ориентированного подхода для оценки уровня качества разработанности программы допустимо, так как, во-первых, используемые при тестировании баллы свидетельствуют о степени умения разрабатывать программу, во- вторых, сами тесты и их оценка свидетельствуют об овладении разработчиками отдельными модулями содержания требований к структуре и содержанию программы развития.
В педагогической литературе существует много определений критериально-ориентированного подхода. Авторы используют этот термин различно, поэтому необходимо однозначно определить критериально-ориентированный подход. Каждый вид критериально-ориентированного теста составлен для того, чтобы интерпретировать результаты тестирования по отношению к определенной области содержания. Эта интерпретация может совершаться различными способами, которые зависят от цели тестирования. Критериально-ориентированный тест — это такой тест, который намеренно составлен, чтобы производить педагогические измерения и напрямую интерпретироваться в терминах точно определенного стандарта. Данные педагогические измерения производятся путем выбора репрезентативного набора тестовых заданий на соответствующей области содержания. Критериально-ориентированные тесты специально составлены таким образом, чтобы обобщить результаты индивидуальных баллов
области содержания [1]. Причем тестовые задания могут включать как проверку содержания, так и проверку навыков и умений. Домены называются хорошо определенными, если совершенно ясно, какая категория тестовых заданий потенциально принадлежит данной области содержания.
Соответственно двум подходам к интерпретации результатов тестирования выстраиваются и два подхода к созданию педагогических тестов. Оба они перспективны и важны, имеют свою сферу применения, преимущества и недостатки. Выбор подхода к интерпретации результатов тестирования необходимо сделать в самом начале, в момент постановки цели создания теста. В противном случае можно оказаться в ситуации, когда результаты тестирования окажутся недостаточно информативными и непригодными для принятия обоснованных управленческих решений в рамках обоих подходов из-за неопределенности при интерпретации результатов выполнения теста. С первого взгляда оба подхода — нормативный и критериальный — непротиворечивы, поэтому у многих педагогов возникает впечатление, что можно делать тесты, допускающие сразу обе интерпретации результатов. Для специалистов по педагогическим измерениям совмещение нормативно-ориентированного и критериально-ориентированного подходов представляется недопустимым в силу целого ряда различий в конструировании тестов, поэтому в соответствии с двумя подходами к интерпретации результатов тестирования выделяют нормативно-ориентированные и критериально-ориентированные тесты [3].
Предлагаем ознакомиться с разработанными нами критериями проведения экспертизы программы развития. По сути, именно они и являются структурными составляющими важнейшего стратегического документа, определяющего деятельность образовательной орга-
относительно точно определенного домена, или низации.
Таблица 1
Экспертный лист программы развития ПОО СПО [4]
|
Показатели |
Критерии оценки показателя |
Баллы |
Весовой коэффициент |
Итого баллов |
|
1 |
2 |
3 |
4 |
5 |
|
1. Паспорт программы |
||||
|
Наименование программы |
Есть Неполное Нет |
2 1 0 |
1 |
|
|
Основания для разработки программы |
Нормативная база представлена полностью Не полностью Меньше половины |
2 1 0 |
1 |
|
Продолжение табл. 1
|
1 |
2 |
3 |
4 |
5 |
|
Государственный заказ- |
Указан верно |
2 |
1 |
|
|
чик |
Указан неверно |
1 |
||
|
Не указан |
0 |
|||
|
Разработчик программы |
Указан верно |
2 |
1 |
|
|
Указан неверно |
1 |
|||
|
Не указан |
0 |
|||
|
Цель программы |
Указана верно (с учетом стратегии развития профобразования и перспектив развития конкретной ПОО) |
2 |
2 |
|
|
Указана неверно |
1 |
|||
|
Не указана |
0 |
|||
|
Задачи программы |
Указаны верно |
2 |
2 |
|
|
Указаны неверно (не соответствуют целям) |
1 |
|||
|
Не указаны или не конкретизируют достижение целей |
0 |
|||
|
Сроки реализации про- |
Указаны верно |
2 |
1 |
|
|
граммы |
Указаны неверно |
1 |
||
|
Не указаны |
0 |
|||
|
Наличие показателей, |
Имеются в наличии |
2 |
3 |
|
|
соответствующих обя- |
Отсутствует хотя бы один показатель |
0 |
||
|
зательным показателям |
||||
|
стратегии развития профобразования Челябинской области |
||||
|
Классификация показа- |
Классифицированы условия, содержа- |
2 |
3 |
|
|
телей в соответствии с |
ние, кадры, обучаемые (в % с учетом |
|||
|
объективными фактора- |
федеральных значений) |
|||
|
ми образовательного про- |
Не выдерживаются одно-два условий |
1 |
||
|
цесса |
Не выдерживаются более двух условий |
0 |
||
|
Объемы и источники фи- |
Указаны верно |
2 |
2 |
|
|
нансирования |
Указаны неверно |
1 |
||
|
Не указаны |
0 |
|||
|
Ожидаемые результаты |
Классифицированы условия, содержа- |
2 |
3 |
|
|
программы |
ние, кадры, обучаемые (заданы в % с учетом федеральных значений) Не выдерживаются одно-два условий |
1 |
||
|
Не выдерживаются более двух условий |
0 |
|||
|
Контроль за исполнением |
Указан верно |
2 |
1 |
|
|
программы |
Указан неверно |
1 |
||
|
Не указан |
0 |
|||
|
Дата утверждения программы |
||||
|
2. Анализ факторов (внешних и внутренних), оказывающих существенное влияние на деятельность ПОО |
||||
|
(Информационная справка о ПОО СПО) |
||||
|
Анализ состояния обра- |
Дан подробный анализ (с графической |
2 |
3 |
|
|
зовательной организации |
интерпретацией): подраздел содержит |
|||
|
с позиции внедрения ин- |
описание используемых инновационных |
|||
|
новаций за последние три |
методик, технологий, организационных |
|||
|
года |
форм, разработанных ранее как новшество кем-либо из членов коллектива или |
|||
|
привнесенных извне Дан краткий анализ |
1 |
|||
|
Анализа нет |
0 |
|||
Продолжение табл. 1
|
1 |
2 |
3 |
4 |
5 |
|
Создание современных условий для обучения и воспитания, в том числе для открытия новых профессий и специальностей СПО с учетом стратегии социально-экономического развития Челябинской области |
Четко перечислены новые профессии и специальности, современные условия обучения и воспитания Вопрос описан общими фразами Вопрос не раскрыт |
2 1 0 |
3 |
|
|
Обеспечение требований федеральных государственных стандартов среднего профессионального образования и повышение привлекательности программ профессионального образования, востребованных на региональном рынке труда |
Обосновано материально-техническое, нормативно-правовое и учебно-методическое обеспечение, раскрыты проблемы и предложены пути решения Отсутствует хотя бы один пункт обоснования Отсутствует обоснование двух и более пунктов |
2 1 0 |
3 |
|
|
Развитие кадровых ресурсов учреждения |
Представлены обоснование необходимости развития кадровых ресурсов учреждения и гистограмма развития Развитие показано графически, обоснования нет Вопрос не представлен |
2 1 0 |
2 |
|
|
Совершенствование воспитательной системы образовательного учреждения |
Предусмотрены инновационные концепции воспитания, предложен инструментарий оценивания развития личности обучаемого Отсутствует инструментарий оценивания развития личности обучаемого Нет инноваций в воспитании |
2 1 0 |
3 |
|
|
Поддержка талантливых обучаемых и лиц с ограниченными возможностями здоровья |
Внедряются технологии инклюзивного обучения, развития, воспитания Способы поддержки представлены неявно Вопрос не раскрыт |
2 1 0 |
3 |
|
|
Развитие системы профессионально-общест-венной аккредитации, оценки качества и сертификации профессиональных квалификаций с участием работодателей и т. д. |
Разработана и внедряется система профессионально-общественной аккредитации, оценки качества и сертификации профессиональных квалификаций с участием работодателей и т. д. (представлен график) На стадии подготовки Общественная аккредитация, оценка качества и сертификация профессиональных квалификаций с участием работодателей и т. д. не осваивается |
2 1 0 |
3 |
|
|
Внедрение новых финансово-экономических механизмов в деятельность профессиональной образовательной организации |
Запланировано внедрение новых финансово-экономических механизмов в деятельность профессиональной образовательной организации, описаны условия, виды новых финансово-экономических механизмов Вопрос раскрыт формально Пункт не запланирован |
2 1 0 |
3 |
Продолжение табл. 1
|
1 |
2 |
3 |
4 |
5 |
|
Организация деятельности профессиональной образовательной организации среднего профессионального образования на основе создания центров прикладных квалификаций |
Планируется создание центров прикладных квалификаций и организация деятельности Разрабатывается проект Пункт не запланирован |
2 1 0 |
3 |
|
|
Обеспечение регионального заказа на подготовку квалифицированных рабочих кадров, служащих и специалистов в образовательных учреждениях среднего профессионального образования на основе прогнозов потребности в кадрах и особенностей социальноэкономического развития Челябинской области |
Изучение прогнозов потребности в кадрах и особенностей социально-экономического развития Челябинской области с целью обеспечения регионального заказа на подготовку квалифицированных рабочих Работа без изучения потребностей Пункт не запланирован |
2 1 0 |
2 |
|
|
Укрепление и развитие системы социального партнёрства |
Намечены эффективные способы развития Динамика развития не просматривается Пункт не освещен |
2 1 0 |
2 |
|
|
Создание эффективных координационных механизмов управления ПОО СПО |
Намечен переход на новые технологии управления Внесены некоторые элементы корректировки в управление Изменений нет |
2 1 0 |
3 |
|
|
3. Разработка системы программных мероприятий |
||||
|
Использование различных способов разработки системы программных мероприятий |
3 |
|||
|
Первый способ |
Разработка системы программных мероприятий на основе решения задач программы преобразовательной деятельности |
2 |
||
|
Второй способ |
Разработка системы программных мероприятий заключается в подготовке плана-графика комплекса мероприятий по направлениям |
2 |
||
|
Третий способ |
Разработка системы программных мероприятий на основе программы проектной деятельности Традиционный Система программных мероприятий разработана неверно |
2 1 0 |
||
|
Ресурсное обеспечение программы |
Предусмотрено Не предусмотрено |
2 0 |
2 |
|
|
4. Культура оформления документа |
||||
|
Соблюдение требований к оформлению |
Соблюдены полностью Соблюдены частично Не соблюдены в большей степени |
2 1 0 |
1 |
|
Окончание табл. 1
|
1 |
2 |
3 |
4 |
5 |
|
Максимальное значение баллов N |
120 |
|||
|
Фактическое значение баллов Ф |
||||
|
Е = ° N при 0,85 ≤ К ≤ 1 — высокий уровень разработки программы; при 0,65 ≤ К < 0,85 — средний уровень разработки программы; при К < 0,65 — низкий уровень разработки программы |
||||
Список литературы Критериально-ориентированный подход к оценке содержания и структуры программы развития профессиональной образовательной организации СПО
- Berk, R.A. Criterion-referenced measurement: The state of art /R.A. Berk. -Baltimor, MD: Johns Hopkins University Press, 1980.
- Macmillan, N.Y. Educational measurement (Ed. by Linn R.) /N.Y. Macmillan, 1989. -610 с.
- Основные подходы к разработке измерителей . -Режим доступа: http://www.plam.ru/ucebnik/kontrol_kachestva_obuchenija_pri_attestacii_kompetentnostnyi_podhod/p5.php
- Серкова, Г.Г. Инновационная и экспериментальная работа в учреждениях профессионального образования : учеб.-метод. пособие/Г.Г. Серкова: Мин-во образования и науки Чел. обл. (Челябинск), Челябинский ИРПО. -Челябинск, 2010. -202 c.
