Поликодовый текст как средство реализации мультимодального подхода к обучению будущего учителя иностранного языка

П остановка проблемы. Проблема мультимодального подхода к обучению иностранному языку и применения в процессе обучения поликодовых текстов не теряет своей актуальности. Теория мультимодальности рассматривается в исследованиях В.А. Омельяненко, Е.Н. Ремчуковой (2018); Jr.O. Vian, R. Rojo (2020), которые подчеркивают необходимость разграничения подходов к работе с лингвистическим (вербальным), экстра-лингвистическим (невербальным) и смешанным текстом.

Мультимодальность является объектом отечественных и зарубежных лингвистических и методических исследованиий (В.В. Махова, О.Н. Занина, 2021; Zobenica, 2020).

Перспективы использования мультимодального подхода в иноязычном образовании анализируются как в контексте применения метода мультимодального анализа (М.В. Загидулли-на, 2023), так и в более широкой сфере – постди-гитальной (постцифровой) трансформации урока иностранного языка в целом (Dobstadt, Herzig, Riedner, Vázquez, 2022), повлекшей за собой признание полимодальности учебных материалов как условия эффективного цифрового образования (А.Н. Журавлева, М.А. Салькова, 2022; Weinberger, Hartmann, Kataja, 2020; Deutscher Akademischer Austauschdienst…, 2023).

Одним из средств реализации мультимодального подхода к обучению будущего учителя иностранного языка считается поликодовый текст (Н.В. Новоспасская, Н.М. Дугалич, 2022), являющийся основой полимодального дискурса (Т.И. Попова, Д.В. Колесова, 2020; А.П. Гусева, 2021; О.М. Куницына, 2023).

Алгоритм применения поликодовых и поли-модальных текстов, а также систему полимо-дальных упражнений при обучении иностранному языку подробно рассматривают С.Ф. Галкина, В.И. Филатова, А.С. Юсяев (2021); Е.О. Кузьмина, Н.А. Красикова (2021); А.А. Кирилловых (2022); В.В. Кучер (2023); Г.Р. Гарипова, З.Н. Изимарие-ва (2023); Ц. Цзялинь (2023); S. Dorgerloh, K. Wolf (2020); S. Zander, S. Heidig (2020); S. Rajendram (2020); С.М. Ersch (2021); М. Grein (2021).

Методологию исследования составляют теоретические обоснования необходимости применения мультимодального подхода к процессу подготовки будущего учителя иностранного языка к практической профессиональной деятельности; описание практического опыта применения разработанных рекомендаций по осуществлению данного процесса.

Обзор научной литературы. Термин «мультимодальность» в лингвистических и психологопедагогических исследованиях трактуется по-разному: в лингвистике мультимодальность рассматривается как способ восприятия мира, при котором слово заменяется образом и изобразительные единицы признаются самостоятельными носителями реальности, что выражается в приоритете визуального ряда над вербальным [Омельяненко, Ремчукова, 2018]. Таким образом, возникает новая текстовая форма: так называемый «смешанный текст», который отечественными исследователями-лингвистами чаще всего обозначается как «полимодальный» или «по-ликодовый» [Баклагова, 2023; Цзялинь, 2023], а в зарубежной лингвистической практике именуется «мультимодальным» [Zander, Heidig, 2020].

В теории и методике преподавания единого мнения по поводу данной терминологии не существует до сих пор, однако намечается тенденция перехода на наименование «смешанных» текстов, как и в лингвистике, «полимо-дальными» или «поликодовыми». В работах 2019–2022 гг. еще сохраняется термин «мультимодальный»: так, М.Г. Калинина и С.В. Кудряшова пишут о мультимодальном представлении видеоконтента [Калинина, Кудряшова, 2022]; О.Ф. Купрещенко рассматривает учебный лон-грид как мультимодальный текст [Купрещенко, 2020]; Е.З. Шевалдышева и А.А. Сибгатуллина анализируют потенциал мультимодальных текстов [Шевалдышева, 2019; Сибгатуллина, 2022]; С.И. Симакова, А.П. Енбаева, Т.Б. Исакова приводят примеры теоретического осмысления мультимедийного сторителлинга [Симакова и др., 2019]. Однако большинство авторов исследований 2022–2023 гг. переходят на дефиницию термина «поликодовый текст»: терминосисте-му теории поликодовых текстов рассматривают Н.В. Новоспасская и Н.М. Дугалич [Новоспасская, Дугалич, 2022]; о полимодальности восприятия информации, в том числе и текстовой, пишут Г.Р. Гарипова, З.Н. Изимариева и В.В. Кучер [Гарипова, Изимариева, 2023; Кучер, 2023].

Поликодовый текст противопоставляется традиционному монокодовому тексту, имеющему гомогенный замкнутый характер. Анализируя вышесказанное, под поликодовым текстом мы предлагаем понимать аутентичный текст открытого для интертекстуальных связей типа, созданный носителем языка и культуры для носителей той же лингвокультуры, в котором наблюдается взаимодействие вербального и невербального компонентов.

Применение поликодовых текстов при обучении иностранному языку происходит в рамках мультимодального подхода, собственно по-ликодовый текст и рассматривается как одно из средств реализации мультимодального подхода к обучению, который может быть определен как использование в процессе восприятия учебной информации нескольких сенсорных систем, обеспечивающих мультимедийность обучения за счет объединения таких цифровых категорий, как текст, звук и изображение.

В рамках мультимодального подхода к обучению иностранному языку возможно применение таких видов поликодовых текстов, как мультимедийный сторителлинг [Симакова и др., 2019], учебный лонгрид [Купрещенко, 2020], комплекс полимодальных упражнений [Цзялинь, 2023; Digitale Welt von Klett, 2024;

Zander, Heidig, 2020; Rajendram, 2020]; научнопопулярная интернет-статья, новостной сайт, обучающий постер и видеолекция [Галкина и др., 2021].

Виды и формы работы с поликодовым текстом зависят от типа корреляции вербального и невербального компонентов. На рисунке представлены типы корреляции, выделенные В.А. Сенцовой [Сенцова, 2017].

Результаты исследования . В данной статье рассматриваются рекомендации по использованию мультимодального подхода к работе с иноязычным тестом, включающие комплекс заданий, предназначенных для работы с такими видами поликодовых текстов, как веб-комиксы, интернет-мемы, мем-эдвайсы, открытка-мотиватор, открытка-демотиватор, звуковая реклама (видеоролик с субтитрами).

Рис. Классификация поликодовых текстов в зависимости от типа корреляции вербального и невербального компонентов

Fig. Classification of polycode texts depending on the type of correlation of verbal and nonverbal components

Рассмотрим, как может быть реализована работа с поликодовыми текстами с разными типами корреляции, представленными на рисунке, в рамках применения мультимодального подхода к обучению иностранному языку будущих учителей. Тексты с вербально доминирующей корреляцией мы не рассматриваем, так как они являются своего рода «доминантой» классической работы с текстом и не требуют применения мультимодальных средств, хотя и могут использовать эти средства в качестве дополнительных.

К текстам с взаимодополняющей корреляцией относятся веб-комиксы, предполагающие использование таких приемов работы, как аннотация, прием графической систематизации (кластер), селективный конспект, ответы на вопросы, составление дайджеста. Рассмотрим алгоритм работы с веб-комиксом «Die Stadt der träumenden Bücher», созданным на основе романа-бестселлера Walter Moers.

Прочитав краткое содержание романа и ознакомившись с отдельными стрипами комикса, обучающиеся составляют аннотацию к вебкомиксу, прогнозируя его содержание. Пример ответа: Buchhaim ist die Stadt der Träumenden Bücher, wo Bücher nicht nur spannend oder komisch sind, sondern auch in den Wahnsinn treiben oder sogar töten können. Walter Moers’ fantastische Abenteuergeschichte um den jungen Dichter Hildegunst von Mythenmetz, der das Geheimnis eines makellosen Manuskriptes ergründet, hat weltweit die Leser begeistert. Nun gibt es diese Geschichte aus dem Abenteuerreich der Literatur als prächtige Graphic Novel. In jahrelanger Arbeit hat Walter Moers seinen Romantext auf die Bedürfnisse einer Graphic Novel umgearbeitet und in Form eines Szenarios Hunderte von Bildern skizziert, die Florian Biege in enger Zusammenarbeit mit dem Autor kongenial in einen brillanten Comic von plastischer Farbigkeit verwandelt hat [Die Stadt...].

Выделение смысловых блоков и осмысление их в виде кластерного сценария комикса происходит при анализе его визуального ряда в ходе графической систематизации информации. Составление селективного конспекта предусматривает маркировку денотатов комикса: Zamonien, Volk der Buchlinge, Buchhaim, die Bucherjager, der Schattenkonig, die Katakomben. Визуальная информация помогает найти ответы на вопросы: Wer ist Hildegunst? Warum muss Hildegunst aus der Gemeinschaft der Buchlinge fliehen? Woher sind die bösartigen Bücherjäger gekommen? Welche Gefahr trifft das geheimnisvolle Volk der Buchlinge? Дайджест рассказывает о работе авторов комикса и поясняет, почему этот комикс пользуется такой популярностью.

Тексты с оппозиционной корреляцией содержат противоречия между содержанием, отраженным вербальными и невербальными средствами, из-за чего возникает комический эффект. Примером может служить широко распространенный в немецко-язычном лингвокультурном пространстве интернет-мем, основанный на игре слов: der Stollen / die Stolle - это традиционная немецкая выпечка с изюмом и миндалем; рождественский кекс, с которым связаны многовековые обычаи и традиции, в то время как der Stollen - это штольня, горная выработка с выходом на поверхность. Интернет-мем представляет две изюминки (Rosinen) в шахтерских касках, которые ведут следующий диалог: Warum trägst du einen Helm? Ich gehe in den Stollen. В сети отмечаются вариации мема, где указывается знаменитая фирма, производящая штоллен: Treffen sich 2 Rosinen. Wo willst du denn hin? In Schäffers Butterstollen или изменения в его составе (включение миндаля): Kommst du mit in den Stollen? Geht nicht, Mandelentzündung.

При работе с интернет-мемом на дотекстовом этапе обучающиеся знакомятся с историей слов der Stollen / die Stolle; рассматривают рецептуру выпечки. Для понимания игры слов (комического эффекта) используется составление денотатной карты: выделение в высказывании объектов-денотатов, раскрывающих предметные взаимосвязи. Так, для понимания интернет-мема Kommst du mit in den Stollen? Geht nicht, Mandelentzundung, нужно учесть лексику, относящуюся к тематическому полю «здоровье» (Mandelentzündung – дословно: воспаление миндалин), чтобы оценить игру слов.

В отличие от интернет-мемов, мемы-эдвайсы относятся к текстам с взаимозависимой корреляцией и могут быть правильно интерпретированы только при знакомстве с лингвокультурным фоном как высказывания, так и изображения. Популярный среди немцев-отпускников мем-девайс Vollkornbrot im Urlaub содержит вопрос-предположение о том, чего не хватает в отпуске туристам, которые проводят его за границей: Was die Leute im Ausland-Urlaub vermissen? - и два варианта ответа на этот вопрос: текстовой – Eltern, beste Freunde, eigenes Bett (для иностранцев) и иллюстративный (без надписи) – фотография булки цельнозернового хлеба Vollkornbrot (для немцев).

Работа с мем-эдвайсом требует предварительной (дотекстовой) подготовки: необходимо провести лексико-грамматический анализ лингвистической и эмотивной составляющей фразы-совета, выделить ее доминанту и лишь затем приступать к маркировке текста: анализу кросс-культурных различий в высказываниях персонажа, ответам на вопросы (простые, уточняющие, интерпретационные, оценочные) и выполнению подстановочных и трансформационных заданий и упражнений. В данном случае доминантой фразы-совета является слово Vollkorn-brot: Roggen-Vollkornbrot gilt als typisch deutsche Brotsorte und ist als Klassiker der deutschen Brot-kultur ein immaterielles Kulturerbe Deutschlands. Roggen-Vollkornbrot enthält, bezogen auf die insgesamt enthaltenen Mahlerzeugnisse, mind-estens 90 % Roggen inkl. Schalen und Keimling. Ein Roggen-Vollkornbrot hat übrigens etwa 25 % weniger Kalorien als die gleiche Menge Weißbrot. Der ernährungsphysiologische Wert von Roggen-Vollkornbroten wird durch ihren Gehalt an Ballast-stoffen, Vitaminen und Mineralstoffen bestimmt. In Zeiten des Klimawandels sei es zudem bedeutsam, dass Roggen genügsamer als Weizen ist und auch auf trockenen Böden gut wächst [Roggenvollkorn-brot. Lokalmatador].

Тексты с невербально доминирующей корреляцией широко представлены в сети открытками-мотиваторами (демотиваторами). Как правило, они не содержат закрытой лингвокультурной информации и зачастую повторяются на разноязычных сайтах в идентичной форме (меняется только языковое оформление надписи), поэтому их легко понять: Na klar, bin ich in Form! Rund ist auch eine Form (изображение кота, страдающего ожирением); Ich werde dich finden und heiraten! (изображение девушки, сидящей за компьютером); Parken verboten! Nicht 5 Minuten. Nicht 30 Sekunden. Gar nicht! (плакат на платной парковке).

Однако встречаются и исключения из общего правила. Так, для понимания комического эффекта открытки-демотиватора Kinder, das ist aber eine Überraschung! надо знать сказку братьев Гримм о пряничном домике; традицион- ную формулу поздравления с днем святого Николая и текст песни, посвященной этому святому. На открытке изображены ведьма и брат с сестрой (Гензель и Гретель), которых она заманила в свой пряничный домик – дети пришли в надежде получить поздравление и подарки на день святого Николая. Не понятна будет и открытка с изображением детской железной дороги, поперек которой лежит большой толстый кот (рядом лежит желтая каска), сопровождаемая следующей надписью: Der Grund, warum die Deutsche Bahn immer eine Verspätung hat. При реконструкции Немецкой федеральной железной дороги на плакатах изображался крот-строитель в желтой каске, обещавший быстро исправить положение; но ремонтные работы затянулись – открытка намекает на то, что крота-строителя «съел» кот и поэтому поезда по-прежнему опаздывают [Digitale Welt von Klett. Digitaler Unterrichtsassistent].

В таблице представлены виды поликодовых текстов, рассмотренные выше, и приемы работы с ними на уроке иностранного языка в рамках мультимодального подхода.

В ходе анонимного анкетирования выяснилось, что обучающиеся отдают предпочтение поликодовому, а не монокодовому тексту (42 % против 3 %). 89 % обучающихся считают, что по-ликодовые тексты облегчают восприятие и запоминание информации, дают наглядное представление о картине мира стран изучаемого языка и их культуре.

Результаты апробации комплекса заданий на 3–4-м курсе немецко-английского отделения факультета иностранных языков КГПУ им. В.П. Астафьева: повышение уровня сформированности языковой компетентности обучающихся (73 %) за счет развития умений аудирования, чтения, говорения; социокультурной компетенции (68 %) в ходе работы с аутентичными поликодовыми текстами разного объема, содержащими большой объем лингвокультурной информации; речевой и иноязычной коммуникативной компетенции (83 %) – при использовании различных каналов восприятия у обучающихся создается ощущение полного погружения в языковую среду.

Виды поликодовых текстов и приемы работы с ними на уроке иностранного языка в рамках мультимодального подхода

Types of polycode texts and techniques for working with them at a foreign language class within the framework of a multimodal approach

Виды поликодовых текстов	Приемы работы с поликодовым текстом
Веб-комикс двух- или четырехкадровые единства (стрипы), опубликованные в сети, демонстрирующие четыре этапа события в кадровой последовательности, предоставляющие эмоционально насыщенную лингвокультурную визуальную информацию, содержащую фоновую лексику и разговорные выражения	Аннотация : составление краткого пересказа содержания комикса. Прием графической систематизации (кластер): выделение смысловых блоков и осмысление их в виде кластерного сценария комикса. Селективный конспект : маркировка денотатов комикса, имеющих отношение к заданной преподавателем теме. Ответы на вопросы (уточняющие, интерпретационные, творческие, оценочные, практические). Дайджест : сводка информации, имеющей отношение к событиям, представленным в комиксе
Интернет-мем опубликованное в сети изображение на квадратном поле персонажа и подписи, которая отражает стереотипное мышление или поведение героя	Заполнение таблицы : сопоставление речевого этикета «родной» и иноязычной лингвокультуры. Ответы на вопросы (простые, уточняющие, интерпретационные). Составление денотатной карты : выделение в высказывании объектов- денотатов (глаголы, союзы, наречия), раскрывающих предметные взаимосвязи
Мем-эдвайс категория мемов с персонажами на цветном (уникальном для каждого мема) фоне и фразой, приписываемой этому персонажу, дающему (обычно вредные) советы	Маркировка текста : анализ кросс-культурных различий в высказываниях персонажа. Лексико-грамматический анализ лингвистической и эмотивной составляющей фразы-совета. Ответы на вопросы (простые, уточняющие, интерпретационные, оценочные). Подстановочные и трансформационные задания и упражнения
Открытка-мотиватор (демотиватор) изображение, стилизованное под почтовую открытку, с комментарием-слоганом	Ответы на вопросы (интерпретационные, творческие, оценочные). Селективный конспект : маркировка денотатов, имеющих отношение к заданной преподавателем теме. Подстановочные и трансформационные задания и упражнения
Звуковая реклама (видеоролик с субтитрами)	Ответы на вопросы (простые, уточняющие): при демонстрации фрагментов видеоролика до просмотра его полного варианта. Вероятностное прогнозирование: определение адресатов рекламы до ее просмотра. Дайджест : сводка информации, имеющей отношение к событиям, представленным в видео

Заключение. Применение рекомендуемых в статье приемов работы с различными видами по-ликодового текста подтверждает эффективность использования веб-комиксов, развивающих языковую догадку и навыки творческого мышления

обучающихся; интернет-мемов и мем-эдвайсов, содержащих фоновую лингвокультурную информацию; открыток-мотиваторов (демотиваторов), реализующих денонативно-коннотативный контекст межкультурного общения.