Оценочно-аналитические методы в управлении качеством образования

интерпретации для принятия обоснованных управленческих решений и координации политики вузов в России пока еще не сложился. Во многих странах, обладающих высокоразвитыми системами образования, такой аппарат основывается на эвалюации программ и проектов модернизации образования, обладающей эффективным

научным базисом, основанным на теории педагогических измерений и включающим в себя в том числе и теорию принятия управленческих решений.

В общем случае эвалюация трактуется как системный научно обоснованный процесс сбора и анализа данных для выявления ценности результатов проекта или программы. На основании со-браннойинформации, полученной путем измерений, удовлетворяющих требованиям высокой надежности, валидности и аутентичности, принимаются управленческие решения по программе модернизации образования. Например: одобрить результаты, приостановить осуществление или переориентировать программу на новые цел и. Саму область решений также относят к сфере эва-люации. В целом можно считать, что в современное понимание термина «эвалюация» в образовании вкладывается весь спектр теоретико-методологических и практических работ по системному исследованию характера воздействия проектов и программ на достижение поставленных целей. Это воздействие анализируется по совокупности показателей на основе единой методологии, сочетания количественных и качественных методов для отслеживания содержания и динамики изменений.

К обобщенным целям эвалю-ации можно отнести содействие эффективному осуществлению единой государственной политики в области образования и подготовки кадров; защиту прав граждан на получение образования, соответствующего по своим характеристикам требованиям, установленным в законодательстве и нормативных документах; повышение качества образования, процесса обучения и его результатов; получение органами управления обоснованной информации для принятия прогностических решений по развитию системы образования.

Частные цели эвалюации, ориентированные на выполнение отдельных программ и проектов, включают:

• -    предоставление всем субъектам и пользователям системы образования объективной информации о фактическом уровне выполнения проектов и программ развития образования;

• -    защиту исполнителей проектов и программ от проявлений субъективизма и связанных с ним ошибок при оценке результатов их работы;

• - совершенствование системы конкурсного отбора перспективных программ и проектов в соответствии с актуальными направлениями развития образования;

• -    выявление и осмысление слабых сторон и нерешенных проблем по результатам выполнения программ и проектов, их коррекцию.

Эвалюация не только приносит пользу на уровне управленческих решений, но и содействует развитию общения различных профессиональных кругов. Участие вэвалюации создает ситуацию активного взаимодействия исполнителей проектов и программ, способствуя интенсивному проведению рефлексивно-аналитической деятельности с нарастающей эффективностью по мере выполнения программы или проекта. Эвалюация придает профессиональную уверенность отдельным субъектам педагогической деятельности. Благодаря ее проведению они получают шанс преодолеть слабые и усилить сильные стороны своей деятельности, представить и учебному заведению, и пользователям образовательных услуг объективный отчет о результатах своей работы.

Эвалюация выполняет следующие функции:

• - управленческую, обеспечивающую оптимизацию управления как на уровне отдельно взятого учебного заведения или группы обучающихся, так и системы образования в целом на региональном или федеральном уровне;

• -    контролирующе-оценочную, помогающую выявить степень реализации задач проекта или программы либо эффективность выполнения образовательным учреждением нормативных целей, предоставляя тем самым информацию для мониторинга качества образования и подведения итогов проектов и программ;

• -    мотивирующую, побуждающую к совершенствованию пре-

• подавательской или управленческой деятельности, новым преобразованиям и очередному этапу модернизации в образовании;

• - оптимизирующую, нацеленную на совершенствование всех аспектов выполнения программ и проектов, в том числе контролирующую финансовые затраты (для повышения эффективности расходования средств и ресурсов);

• -    информационную, позволяющую сделать результаты выполнения программ и проектов достоянием академического сообщества и широкой общественности;

• -    прогностическую, нацеленную на предсказание тенденций и динамики развития результатов внедрения проектов и программ в практику образования;

• -    диагностически-корректи-рующую, предназначенную для выявления проблем при выполнении проектов и программ и принятия мер по своевременной коррекции этого процесса;

• -    сравнительную, предоставляющую данные для сравнительного анализа качества образования.

Диагностически-корректирующая функция эвалюации вытекает из самой ее сущности, нацеленной на выявление проблем в реализации проектов и программ, установление их причин и коррекцию процесса реализации. Таким образом, данная функция эвалюации характеризуется следующей сознательно поставленной целью: отслеживать проблемы в ходе выполнения проектов и программ и искать причины их возникновения, что возможно на различных уровнях. Преподаватели вуза, например, могут использовать эва-люацию на занятиях, чтобы выявить проблемные области в деле внедрения компетентностного подхода, нуждающиеся в дополнительной коррекции. На уровне региональных органов управления образованием эвалюа-ция даст информацию о ходе вы

полнения п р о -ектов и программ регионального масштаба. И наконец, на федераль ном уровне органы управления образованием по результатам реализации диагностически-корректирующей функции эва люации могут принимать решение о временном приостановле

нии определенных программ модернизации образования, не приносящих успеха, либо, наоборот, о дополнительном вложении средств в наиболее успешные проекты.

Контролирующе-оценочная функция эвалюации связана с непрерывным отслеживанием промежуточных результатов проек- тов и программ и с подведением итогов их выполнения на заключительном этапе. Она реализуется на основе анализа результатов проектов и программ, а также с помощью проведения специальных контрольных мероприятий в форме тестирования обучающихся, проверок документов, углубленного анализа результатов проектов и программ, а также их воздействия на систему образования. Полноценное выполнение контролирующе-оценочной функции эвалюации способствует сокращению ошибок в принятии управленческих решений на любых уровнях их осуществления.

Возможность говорить об информационной, сравнительной, прогностической и управленческой функциях эвалюации в образовании появилась только в начале XXI века, когда контрольнооценочная деятельность стала рассматриваться как важней- шая составляющая системы менеджмента качества образования. Информационная функция эвалюации является ведущей, поскольку именно она формирует информационное обеспечение управления качеством образования на всех уровнях выполнения проектов и программ, осуществляемого различными мето дами, в том числе с применением прямого административного вмешательства. Информация, получаемая при эвалюации в образовательных учреждениях, может использоваться для идентификации проблем в системе обучения, связанных с недостатками в методах преподавания, искажениями в структуре и содержании учебных планов, просчетами авторов учебников и др. Исследование эффективности деятельности образовательных учреждений и преподавателей, проведенное в Великобритании, США и других странах, показало, что наиболее авторитетные учебные заведения имеют свою современную и развитую контрольно-оценочную систему. Обучающиеся в них участвуют в международных сравнительных исследованиях качества образования, а преподаватели, болеющие за общее дело, часто тестируют своих учащихся и подготавливают еженедельные и ежемесячные обзоры их учебных достижений.

Выполнение информационной функции эвалюации основывается на измерениях, выполняемых для сбора данных, их анализа, структуризации и интерпретации на основе выделенной совокупности показателей качества образования, но это тогда, когда анализ носит не сопоставительный или прогностический, а констатирующий характер и используется для выработки текущих управленческих решений. Нередко при выполнении информационной функции эвалюации полученные результаты сопоставляются с некоторыми нормами и стандартами.

Для сотрудников органов управления районного, областного, регионального и федерального уровней анализ данных эвалюации должен проводиться с учетом внешних по отношению к системе образования контекстных факторов, значимо влияющих на качество образования. Поэтому данные педагогических измерений, собираемые при проведении эвалюации, необходимо дополнять качественными характеристиками, социально-экономическими и другими факторами, в том числе не входящими в сферу влияния системы образования. Помимо этого, для более обоснованного анализа эффективности деятельности учебных заведений в процессе эвалюации нужно учитывать входные характеристики в обучении, связанные с начальными способностями обучающихся, квалификацией преподавателей, размерами финансирования и др.

Выполнение сравнительной функции эвалюации носит опосредованный характер, проявляющийся в особенностях анализа результатов измерения, который направлен на сопоставление количественных оценок по совокупности показателей, выделенных в рамках проектов или программ для регионов, вузов, отдельных преподавателей. Сравнения проводятся либо по вертикали (территории, регионы, образовательные учреждения), либо по горизонтали (рейтинг учебных заведений, территорий и пр.) путем сопоставления количественных оценок по одинаковым показателям и с учетом различных факторов, смещающих оценки по показателям. Специфика анализа данных при проведении сравнений заставляет принимать специальные меры для обеспечения корректной реализации сравнительной функции эвалюации, поскольку на основе результатов анализа нередко принимаются административные решения.

Прогностическая функция эвалюации проявляется при предсказании позитивных и негативных тенденций в развитии образовательных систем. Она очень важна для решения управленческих задач в образовании, если одной из ведущих целей управленческой деятельности считать формирование социального заказа, соответствующего потенциалу системы образования. Ее роль в настоящее время неуклонно возрастает в силу изменений, происходящих в характере управленческих решений на разных уровнях иерархии в образовании. Если раньше приоритет принадлежал оперативным управленческим решениям,направленным на текущее функционирование образовательных структур, то сейчас на первый план нередко выходят стратегические решения, нацеленные на перспективные направления развития системы образования.

Многие из негативных последствий реформаторства можно было предвидеть и принять упреждающие меры на момент осуществления нововведений, если иметь соответствующие информационные условия для разработки стратегии на основе ана лиза внутрисистемных и межсистемных противоречий. Стратегические управленческие решения, направленные на развитие системы образования, должны основываться на вероятностных оценках тенденций в образовании, которые следует получать с помощью специального анализа, проводимого в эвалюации на основе данных педагогических измерений. Для прогноза обычно широко используются методы регрессионного анализа и другие математико-статистические методы. В качестве измерителей необходимы стандартизированные тесты с высокой прогностической валидностью.

В чистом виде отдельные функции эвалюации, конечно, не встречаются. Они реализуются в различных сочетаниях с приоритетом одной или нескольких ведущих функций, осуществляемых в зависимости от целей эвалюации и их приложения в практике образования. Для выполнения этих функций можно выделить шесть наиболее типичных для процесса эвалюации этапов действий:

• -    построение концептуальной модели (логической или математической) исследования в рамках программы или проекта;

• -    идентификация ключевых пунктов процесса эвалюации;

• - определение измеримых результатов эвалюации;

• -    разработка модели проведения эвалюации;

• -    сбор данных измерений;

  -анализ данных измерения, генерализация, интерпретация данных анализа для получения оперативной и прогностической информации об изменениях в качестве образования.

Расширенная трактовка эвалюации в образовании позволяет связывать ее с процессом развития образовательных учреждений, эффективностью их деятельности, характеристиками качества процесса обучения, те. со все- ми образовательными объектами, задействованными при выполнении различных образовательных программ и проектов. Ограничения при проведении эвалю-ации могут быть вызваны отсутствием достаточного количества средств, времени или факторами, связанными с принятием политических решений об изменении приоритетов в распределении финансирования. Политика всегда вовлечена в процесс эва-люации, поэтому ограничения с ее стороны необходимо учитывать на протяжении всего процесса эва-люации. При проведении эвалюа-ции приходится постоянно искать ответы на ряд вопросов: в какой степени действия по программе или отдельным проектам отвечают политическим запросам общества? Были ли эти действия одобрены соответствующими представителями общественности и адекватны ли результаты программы поставленным целям? Эффективно ли управляли ресурсами программы ее исполнители и как расходовались средства ее участниками? Достигла ли программа намеченных результатов? Каково совокупное воздействие программы? Какие непредвиденные эффекты (положительные или отрицательные) программа оказала на проблемы или клиентов, для которых она была разработана? Воздействовала ли программа на другие программы, нацеленные на подобную проблему? Как результаты программы выглядят на фоне альтернативной стратегии для достижения тех же самых итоговых результатов? Получены ли эффекты исключительно благодаря ценности программы, ее финансовым и другим затратам?

Ответы на эти вопросы необходимы при выполнении всех программ в системе образования, особенно в тех случаях, ког

да они имеют широкомасштабный характер. Примерами тому могут быть введение уровневой подготовки и новых федеральных государственных образовательных стандартов в системе высшего профессионального образования, создание системы сертификации профессиональной квалификации специалистов или выпускников вузов и множество других менее масштабных программ.

Таким образом, на сегодняшний день эвалюация является необходимым слагаемым современных образовательных систем, без которого не могут быть решены многие актуальные проблемы управления качеством образования. Эвалюация часто приводит к новому пониманию процессов или получению новой информации о них, поскольку сами результаты эвалюации могут включать даже незапланированные направления анализа либо появление так называемых непредвиденных последствий программ. Доминирующие в наше время подходы в управлении качеством образования подчеркивают естественные взаимосвязи между выполнением программ, проектов и эвалюацией, причем последняя не добавляется к проектам или программам при проведении аудита или другой контрольной проверки, а является их частью с самого начала. Проведение эвалюации должно стать непременной составляющей функционирования образовательных систем, поскольку она способствует повышению эффективности управления системой образования.