Оценка качества академических эссе в системе непрерывного образования

Современное развитие общества, а также особенности политикоэкономической ситуации характеризуются постоянно изменяющимися условиями реальности, что не могло не отразиться и на сфере образования. Основные требования, предъявляемые к выпускникам вузов и учреждений СПО, отражены в стратегических документах РФ, таких, как Федеральный закон от 28.06.2014 № 172-ФЗ «О стратегическом планировании в Российской Федера-ции»1, Указ Президента Российской Федерации от 21.07.2020 г. № 474 «О целях развития Российской Федерации на период до 2030 года»2, Послание Президента Российской Федерации В. В. Путина Федеральному собранию Российской

Федерации от 21 февраля 2023 г.1 Соответствие данным требованиям подразумевает модернизацию и адаптацию существующих методик обучения к нуждам современного рынка труда. Следовательно, обеспечение конкурентоспособности молодого специалиста становится одной из основных задач учебного заведения, что обуславливает актуальность данного исследования.

Формирование всесторонне развитой личности будущего выпускника становится одной из основных задач современного образования, что привело к смене образовательной парадигмы и введению новых федеральных государственных образовательных стандартов третьего поколения (ФГОС3+ и ФГОС3++)2. Данные стандарты опираются на компетентностный подход, который предполагает принципиально новое проектирование результатов образования посредством формирования универсальных, общепрофессиональных и профессиональных компетенций как совокупности знаний, умений, личностных качеств, профессиональных и надпрофессиональных навыков выпускника, позволяющих будущему специалисту быстрее адаптироваться к вызовам профессии [1, с. 8; 2, с. 262].

Кроме того, одной из задач дисциплины «иностранный язык» в вузе является формирование коммуникативной компетенции обучающегося, представляющей собой «совокупность общекультурных и общепрофессиональных компетенций, связанных с навыками коммуникации, социального взаимодействия, работы в команде и др. [3, с. 34]. Отметим, что учебная деятельность, направленная на формирование коммуникативной компетенции, обязательна для обучающихся всех направлений и специальностей, поскольку профессиональная деятельность так или иначе связана с коммуникацией [4, с. 61]. Тем не менее в ходе формирования коммуникативной компетенции существует ряд проблем, среди которых могут быть отмечены недостаточная сформированность языковых навыков, узкий кругозор обучающихся ввиду малых объемов чтения, отсутствие критического мышления, неспособность к анализу и интерпретации текста и многие другие [5, с. 18]. Следовательно, развитие навыков создания академического эссе может выступать одним из инструментов их решения, поскольку данному жанру присущи «рефлексичность, критичность, академический стиль, точность, четкость, ясность, богатство мысли, логичность и легкость изложения», в равной степени важные для формирования коммуникативной компетентности будущего специалиста [6, с. 10]. Более того, «данная компетенция носит многокомпонентный характер и включает методологическую, логическую (аргументативную), речевую и научно-публикационную составляющие [7, с. 5].

Отметим, что навыки академического письма необходимы обучающимся при написании курсовых и квалификационных работ, научных статей и др. Однако несформированность соответствующих компетенций значительно снижает качество данных работ. Так, исследователи отмечают отсутствие навыков проведения научного исследования, трудности с формулированием проблематики и методологии исследования, отсутствие практических навыков логического построения и структурирования научного текста [8]. Ввиду отсутствия обязательных курсов академического письма в системе образования, предложено развитие данной компетенции путем реализации различных модулей, среди которых упоминается «академическое эссе на английском языке» [9]. Таким образом, сформированность компетенции создания академического эссе становится базовой для дальнейшей учебной, научной и профессиональной деятельности обучающегося.

Целью данной работы является оценка качества академических эссе. Задач исследования ‒ выявление основных трудностей, с которыми сталкиваются обучающиеся в процессе написания академических эссе, разработка методических рекомендаций для их преодоления и анализ применения данных методических рекомендаций на практике.

Формирование коммуникативной компетенции посредством написания академического эссе в системе непрерывного образования вызывает интерес многих зарубежных и отечественных ученых [10, с. 60; 11; 12, c. 711; 13]. Более того, условия современной геополитической ситуации обуславливают необходимость развития научного и профессионального потенциала страны. По мнению М. Райана, способность выражать свои мысли в академическом дискурсе является основополагающим навыком, необходимым для непрерывного обучения [14, р. 104]. О. М. Шерехова полагает, что «поэтапное формирование компетенций академической грамотности, начиная со школьной скамьи, а затем в колледжах и вузах, может позволить изменить сложившиеся традиции создания научного знания, тем самым обеспечив продвижение российской науки на новую ступень развития» [15, р. 152]. Так, Г. В. Макович рассматривает «организацию и выражение полученных оригинальных знаний обучающихся в соответствии с научно-исследовательскими критериями соответствующей области знаний, спецификой предмета познавательной деятельности в определенной форме жанра академического письма» [16, с. 16]. О. Л. Добрынина также отмечает необходимость развития навыков академической грамотности, обеспечивающих качественную подготовку научных кадров [17]. Согласно мнению О. Н. Гаврилик, именно умение писать академические эссе способствует формированию «образности речи, логичности мышления и, что крайне важно, широкой эрудиции, глубокому пониманию проблемы, чтобы заинтересовать читателя, пробудить его мысль и заставить его задуматься о волнующих нас проблемах» [18, с. 141].

Таким образом, формирование и развитие навыков создания академического эссе для эффективной подготовки студентов к последующей профессиональной и научной деятельности становятся одной из основополагающих задач современного образования. Отметим, что, несмотря на актуальную потребность обучающихся в навыках создания академического эссе, последнее «не является обязательным компонентом российских образовательных программ» [19]. Более того, анализ ошибок, допускаемых обучающимися, показывает достаточно низкий уровень сформированности данного навыка. Поэтому, принимая во внимание неоднозначность явления, в 2021 г. кафедрой иностранных языков ФГБОУ ВО «Ярославский государственный технический университет» было принято решение о проведении ежегодного международного конкурса эссе на иностранных (английский, немецкий), а впоследствии и русском (для изучающих РКИ) языках (далее – Конкурс). Тема Конкурса задается ежегодно в соответствии с Указом Президента России В. В. Путина.

Так, темой Конкурса в 2021 г. (Год науки и технологий) стала «Scimazing: How To Make Science Fun?»; в 2022 г. (Год культурного наследия народов России) – «One-Ninety-Four and More: Peoples of the Russian Federation»; в 2023 г. (Год педагога и наставника) – «Can the Robots Replace the Teachers?», в 2024 г. (Год семьи) – «The Nation is a Family»; в 2025 г. (Год защитника Отечества) – «The Greatest Feat in the People's Memory». Отметим, что проведение Конкурса эссе вызвало высокий интерес и привлекло большое количество участников: в 2021 г. в Конкурсе приняли участие более 400 студентов из 30 учебных заведений Великобритании, Республики Беларусь, Туниса, Габона и России; в 2022 г. – более 350 участников из 35 учебных заведений Великобритании, Республики Беларусь, Украины и России; в 2023 г. – более 350 участников из 43 учебных заведений Республики Беларусь, Республики Казахстан и России; в 2024 г. – более 370 участников из 38 учебных заведений Республики Беларусь, Монголии, Камеруна, Мали, Ганы, Индии, Узбекистана и России; в 2025 г. – более 450 участников из учебных заведений Республики Беларусь, Республики Казахстан, Монголии, Камеруна, Мали, Индии, Узбекистана и России. Большое количество участников Конкурса говорят о востребованности навыков создания академического эссе.

Конкурсные работы предоставляются на иностранном (английском, немецком) языках или русском (для изучающих РКИ) языке. Иллюстрации (рисунки и/или фотографии) должны размещаться в тексте работы; при наличии цитирования обязательны ссылки на источник информации. К участию в Конкурсе не допускаются: работы, содержащие тексты и/или изображения, нарушающие законодательство Российской Федерации; информацию, унижающую достоинство человека или национальной группы, а также включающие иные формы нарушения этических норм; пропаганду употребления (распространения) алкогольных напитков, табачных изделий и других психоактивных веществ; любые формы упоминаний политических партий, лозунгов; религиозную и запрещенную символику; нарушения требований к содержанию и оформлению; упоминания трендов товарной рекламы; анонимные работы или работы без указания реального имени автора. Определение победителей Конкурса производится конкурсной комиссией с учетом следующих критериев: соответствие работы теме, четкая и логически последовательная композиция работы, согласованность ключевых тезисов и утверждений, умение делать выводы и обобщения, оценка и анализ широкого спектра материалов и источников, хорошо сформулированный текст, т. е. обоснованный, с доказательствами критического и независимого мышления, отражение междисциплинарных связей, соблюдение лексических норм литературного языка, оформление текста с соблюдением правил орфографии и пунктуации и соблюдение стилистических норм литературного языка1.

Отметим, что анализ работ Конкурса в 2021 и 2022 гг. показал неудовлетворительные результаты в отношении критериев построения четкой и логически последовательной композиции и согласованности ключевых тезисов и утверждений. Данное обстоятельство обусловило разработку и введение методических рекомендаций в Положение о Конкурсе в 2023 г. Таким образом, в ходе работы рассматривались работы периодов до и после разработки и введения методических рекомендаций.

В ходе исследования работы Конкурса были проанализированы методами выявления, классификации и интерпретации ошибок, допущенных обучающимися, что позволит понять причины ошибок, разработать стратегии для их исправления и сформировать устойчивый навык создания академического эссе. Также были задействованы методы систематизации и статистического анализа с использованием теста Краскала ‒ Уоллиса H, чтобы определить, существует ли значимая разница между независимыми выборками. Тест Краскала ‒ Уоллиса H представляет собой непараметрический метод статистического анализа, который используется для определения статистически значимых различий между двумя или более группами на основе объединенных данных выборки по всем группам по следующей формуле:

H = 12n(n+1)ki = 1R2ini - 3(n+1), где: H – статистика Краскала ‒ Уоллиса; n – общее количество элементов во всех группах; k – количество групп; Rᵢ – сумма рангов для i-й группы; nᵢ – количество элементов в i-й группе.

Согласно интерпретации результатов теста Краскала ‒ Уоллиса Н, большое значение Н указывает на разницу между группами; p-значение показывает вероятность наблюдать данные, если нулевая гипотеза (отсутствие разницы) верна; p-значение ≤ 0,05 обычно свидетельствует о значимой разнице между группа-ми2.

Материалом исследования стали 150 работ Конкурса за 2022, 2023 и 2024 гг., отобранные методом сплошной выборки (по 50 работ из каждого Конкурса), поскольку количество участников в данных выборках было схожим.

Как упомянуто выше, анализ работ Конкурса в 2021 и 2022 гг. показал неудовлетворительные результаты в отношении критериев построения четкой и логически последовательной композиции и согласованности ключевых тезисов и утверждений. Поэтому в соответствии с целью и задачами работы, а также для повышения качества написания академических работ были разработаны ме- тодические рекомендации, включенные в Положение о Конкурсе и позволяющие обучающимся скорректировать некоторые ошибки

Разработка методических рекомендаций была обусловлена необходимостью разграничения академического эссе и других типов письменных работ обучающихся (сочинение, творческое эссе), поскольку академическое эссе «не является свободным художественным выражением мыслей, это четкое, логически обоснованное, объективное и структурированное доказательное рассуждение, эквивалентное краткой исследовательской работе [16]. Кроме того, академическое эссе способно формировать навыки научного мышления, которые могут быть использованы при написании курсовых и выпускных квалификационных работ обучающимися [20, с. 117].

Методические рекомендации были разработаны с учетом специфики академического текста, которая обусловлена соблюдением определенной композиционной парадигмы текста и включает введение, основную мысль автора и заключение [21]. Полагаем, что такая структура является недостаточной, поскольку обучающиеся часто не имеют сформированного навыка написания подобных текстов. Поэтому были переработаны и дополнены методические рекомендации по проверке сочинений для экспертов ЕГЭ-2023 г. ФГБНУ «Федеральный институт педагогических измерений» на 2022/23 уч. г.1 Предлагаемая нами структура эссе представлена в таблице.

Структура эссе

Essay structure

Абзац	Предложение
1. Вступление	Обозначение проблемы
	Комментарий к проблеме
	Риторический вопрос
2. Выражение собственного мнения	Тезис
	1-й аргумент
	2-й аргумент
	3-й аргумент
3. Выражение противоположного мнения	Тезис
	1-й аргумент
	2-й аргумент
4. Несогласие с мнением оппонентов	Тезис + 1-й контраргумент
	2-й контраргумент
5. Вывод	Согласование с проблемой
6. Комментарий	Перспектива проблематики
7. Список использованных источников	Желателен

В соответствии с разделом «Критерии проверки и оценки» рекомендаций для получения обучающимися наиболее высоких баллов сочинение в формате ЕГЭ должно включать в себя формулировку проблемы, комментарий к проблеме с не менее чем двумя примерами, мнение и отношение автора к проблеме, поэтому в структуру Конкурсного эссе были введены дополнительные аспекты, такие как неоднократная аргументация и контраргументация. Несмотря на то что количество аргументов и контраргументов ничем не регламентировано, довольно значительный объем конкурсного эссе (2500‒4000 печатных знаков, с учетом пробелов) обуславливает их введение. Отметим, что соблюдение требований по объему конкурсного эссе является одним из основных критериев оценивания и его несоблюдение влечет исключение работы обучающегося из Конкурса. Полагаем, что следование разработанной нами структуре позволит обучающимся соблюсти требования к объему конкурсной работы.

Поскольку Конкурс проводится на иностранных языках, введение таких аспектов, как «несогласие с мнением оппонента», «аргументация и контраргументация», а также «комментарий», обусловлено попыткой структурирования текста в формате IMRAD (Introduction, Methods, Results and Discussion). Некоторые исследователи, отмечая различия российской и зарубежной научной парадигмы представления результатов исследований, рекомендуют использование IMRAD, что «позволит освоить специфику представления результатов научных исследований в форме, традиционной для зарубежных читателей»1. Также при разработке методических рекомендаций были использованы материалы учебнометодического пособия «Психология служебной деятельности» Нижегородского государственного университета им. Н. И. Лобачевского, содержащие методические разработки по обучению создания эссе2.

Полагаем, что введение данных аспектов в структуру конкурсного эссе позволит обучающимся получить представление о структуре научноисследовательских статей, поскольку повышение уровня академической грамотности обучающихся является одной из основных задач современного образования. Таким образом, разработанные методические рекомендации могут быть применены не только для создания конкурсных работ, но и в дальнейшей деятельности обучающихся, обеспечивая их непрерывное образование.

Согласно методическим рекомендациям, основными целями написания эссе являются: информирование, убеждение читателя, самовыражение автора или комбинация одной или нескольких целей. Их успешное достижение зависит от умения автора правильно определить свою аудиторию. Процесс создания, как правило, состоит из следующих этапов: понимание задания, определение темы, сбор информации, структурирование собранной информации, выработка главного утверждения, написание текста. Кроме того, необходимо согласовывать вступление и заключение с точки зрения соответствия выводов поставленной в эссе проблеме; соблюдение принципа целостности работы достигается за счет выделения абзацев, красных строк, установления логической связи между абзацами; академическому эссе не присущи эмоциональность, экспрессивность, художественность; приветствуются навыки самостоятельного мышления, наличие собственного мнения автора и четкая структура работы, которая предполагает тезисное изложение мыслей автора с обязательной последующей аргументацией данных мыслей. Аргументами могут являться факты, явления общественной жизни, события, жизненные ситуации и жизненный опыт, научные доказательства, ссылки на мнения ученых и др. Лучше приводить два аргумента в пользу каждого тезиса: один аргумент кажется неубедительным, три аргумента могут сделать изложение, выполненное в жанре, ориентированном на краткость и образность, избыточным. Таким образом, эссе приобретает кольцевую структуру (количество тезисов и аргументов зависит от темы, избранного плана, логики развития мысли).

Также в соответствии с целью и задачами работы в ходе исследования рассмотрены работы участников Конкурса на соответствие их критериям. Результаты представлены на рисунке 1.

Соответствие работ критериям Конкурса

Рис. 1. Соответствие работ критериям Конкурса

• Fig. 1.    Student paper compliance with the competition criteria

  Согласно результатам анализа на соответствие выборки конкурсных работ критериям, можно отметить следующее: соответствие работ теме Конкурса подтверждено довольно высокими результатами – 91 % в 2022 г., 89 % в 2023 г. и 87 % в 2024 г. Некоторое снижение показателей связано с использованием участниками Конкурса инструментов искусственного интеллекта (ИИ), поскольку каждая работа проверяется на применение ИИ-контента при написании работ онлайн-сервисом «ИИ-детектор». Построение четкой и логически последовательной композиции работы отмечено на уровне 54, 69 и 71 % работ, соответственно. Значительное повышение может быть объяснено включением методических рекомендаций по организации композиционной структуры академического эссе в Положение о Конкурсе в 2023 г. Показатели по согласованности ключевых тезисов и утверждений демонстрируют значительный рост в 2023 г. по сравнению с 2022 г. – с 54 % до 64 %, который в 2024 г. незначительно снизился до 63 %, что также может быть объяснено введением методических рекомендаций. Тем не менее показатель по умению делать выводы и обобщения показывает устойчивое снижение – с 71 % до 68 %, а позднее до 65 %. Данное обстоятельство непосредственно связано с использованием ИИ при написании конкурсных работ обучающимися. Показатель по оценке и анализу широкого спектра материалов и источников также показывает уверенное снижение – 72, 68 и 61 %, соответственно. Отметим, что показатели по критическому и независимому мышлению и отражению междисциплинарных связей показывают значительное снижение: 65, 62, 58 и 63, 60, 57 %, соответственно, что также связано с использованием ИИ в процессе создания конкурсных работ. В отношении показателей по соблюдению лексических норм литературного языка, оформлению текста с соблюдением правил орфографии и пунктуации и соблюдению стилистических норм литературного языка статистические данные довольно высокие и изменяются незначительно: 74, 73, 75; 81, 79, 82 и 75, 76, 77 %, соответственно, что может объясняться достаточно высоким уровнем сформирован-ности языковых навыков у обучающихся.

Согласно статистическим данным теста Краскала ‒ Уоллиса, значение Н равно 24,6709, что свидетельствует о значительной разнице между группами; p-значение равно 0,0034 (меньше ≤ 0,05), т. е. оцениваемые данные групп различаются значительно.

Следовательно, введение методических рекомендаций позволило значительно повысить качественные показатели работ Конкурса и развить компетенции участников. Тем не менее наиболее проблемными аспектами, возникающими у участников при написании академических эссе, являются те, которые непосредственно связаны с когнитивными функциями обучающихся, их умением анализировать информацию, выявлять закономерности и делать выводы. Несмотря на то что качественные показатели участников повысились, необходимо уделять больше внимания развитию компетенций обучающихся. Таким образом, считаем необходимым и обязательным введение курсов академического письма на всех уровнях образования. Также считаем целесообразным определение основных трудностей, с которыми сталкиваются обучающиеся в процессе написания академического эссе (рис. 2).

■ Поиск и отбор информации

■ Логическая организация текста

■ Специфика научного стиля речи

■ Лексические, грамматические и стилистические особенности текста

■ Адекватная формулировка цели работы

Использование логики и различных методов аргументации для доказательства собственных идей Критическая оценка мнений других авторов

Рис. 2. Трудности при написании академического эссе

• Fig. 2.    Difficulties in writing an academic essay

Согласно результатам анализа по определению основных трудностей, с которыми сталкиваются обучающиеся при написании академического эссе, можно отметить следующее: использование ИИ при написании работы является наиболее частотным показателем и составляет 17 % от общего количества работ; за ним следуют использование научного стиля речи, логики и методов аргументации, поиск, отбор и критическая оценка информации – по 14 % каждый. Считаем данные показатели взаимосвязанными, поскольку современное развитие ИИ не позволяет данной технологии качественно анализировать и синтезировать информацию. К сожалению, обучающиеся часто используют ИИ в своей учебной деятельности, полностью полагаясь на цифровой ресурс. Трудности, возникающие на уровне употребления корректных лексических, грамматических и стилистических единиц, составляют 11 % от общего числа выборки и связаны с недостаточно развитыми языковыми компетенциями обучающихся. Показатель некорректного оформления библиографических данных составляет 10 % и также часто является следствием использования ИИ обучающимися. Логическая организация текста нарушена в 4 % случаев, что может быть объясне- но несформированностью когнитивных навыков обучающихся. Показатель адекватной формулировки цели работы составляет 2 % и, в основном, связан с низким уровнем мотивации обучающихся к написанию академического эссе (на Конкурс присланы работы, не соответствующие теме).

В ходе исследования была проведена оценка качества академических эссе, выявлены основные трудности, с которыми сталкиваются обучающиеся, разработаны и введены методические рекомендации для их преодоления. Анализ применения данных методических рекомендаций позволил значительно повысить качество работ участников по оценочному ряду критериев. Однако в ряде других критериев качественные показатели снизились. Полагаем, что методические рекомендации требуют значительной доработки, направленной на снижение использования систем ИИ в процессе создания академического эссе, что обуславливает дальнейшие перспективы изучения данной проблематики. Таким образом, оценка академических эссе позволяет развить коммуникативную компетентность и когнитивные навыки обучающихся, что положительно скажется на формировании научно-исследовательского потенциала студентов, обеспечивая процесс непрерывного образования будущего специалиста.