КАРТОЧКА ПРОЕКТА ФУНДАМЕНТАЛЬНЫХ И ПОИСКОВЫХ НАУЧНЫХ ИССЛЕДОВАНИЙ,
ПОДДЕРЖАННОГО РОССИЙСКИМ НАУЧНЫМ ФОНДОМ

Информация подготовлена на основании данных из Информационно-аналитической системы РНФ, содержательная часть представлена в авторской редакции. Все права принадлежат авторам, использование или перепечатка материалов допустима только с предварительного согласия авторов.

 

ОБЩИЕ СВЕДЕНИЯ


Номер проекта 25-18-00525

НазваниеВзаимодействие перцептивных и символьных репрезентаций в когнитивной обработке и использовании родного и второго языков

Руководитель Резанова Зоя Ивановна, Доктор филологических наук

Организация финансирования, регион федеральное государственное автономное образовательное учреждение высшего образования "Национальный исследовательский Томский государственный университет" , Томская обл

Конкурс №104 - Конкурс 2025 года «Проведение фундаментальных научных исследований и поисковых научных исследований отдельными научными группами»

Область знания, основной код классификатора 08 - Гуманитарные и социальные науки; 08-453 - Языкознание

Ключевые слова когнитивное моделирование, теория воплощенного познания, перцептивная семантика, естественный билингвизм, функциональный билингвизм, амодальные ментальные репрезентации, векторизованные пространства, корпуса текстов, экспериментальные методы, эксперимент на называние, лексическое решение, категоризация, интегративная модель ментальных репрезентаций, дистрибутивные семантические модели (DSM)

Код ГРНТИ16.31.21


 

ИНФОРМАЦИЯ ИЗ ЗАЯВКИ


Аннотация
Проект направлен на исследование соотношения перцептивных и амодальных ментальных репрезентаций, формирующихся на основе языкового и сенсорного опыта, и их роли в когнитивной обработке и использовании родного и изучаемого языка. Вопрос об этих репрезентациях, возникающий в результате анализа достижений когнитивной науки и лингвистики, носит комплексный и междисциплинарный характер, затрагивая взаимосвязь языкового опыта с процессами формирования и активации ментальных образов. Современная когнитивная наука накопила значительный объем данных, свидетельствующих о гибридной природе концептуальных репрезентаций, которые включают как модальные, так и амодальные элементы. Это подчеркивает важность исследования условий, при которых для восприятия смысла слов активируются те или иные компоненты. Существует гипотеза о том, что амодальные представления формируются в первую очередь за счет лингвистического опыта — когда человек сталкивается с большим количеством текстов и накапливает представления о значениях слов на основе контекстов, в которых они употребляются. Благодаря современным технологиям компьютерного моделирования этот процесс можно воспроизвести, используя методы обработки естественного языка (NLP). Таким образом, значимой проблемой становится определение взаимодействия между модальными и амодальными представлениями в процессе понимания языка. Глобализация и распространение би- и полилингвальных ситуаций, особенно в России, где сосуществуют различные формы билингвизма, актуализирует вопрос о том, каким образом хранятся ментальные репрезентации объектов при наличии двух языков у одного носителя. Актуально выяснить, как взаимодействуют когнитивные системы, когда один из языков — родной, а другой — осваиваемый, и каким образом соотносятся между собой репрезентации первого и второго языка. В частности, важно изучить различия между ранним, естественным и поздним, учебным билингвизмом. Проект ориентирован на создание многофакторной модели когнитивных процессов обработки языка, которая учитывает особенности носителей языка и когнитивные факторы, влияющие на типы взаимодействия амодальных и перцептивных репрезентаций, в которых различные типы представлений могут быть комбинированы в зависимости от условий восприятия. В проекте будут применены междисциплинарные методы: планируется использование методов автоматической обработки языка (NLP) для работы с большими объемами текстов, экспериментальных психолингвистических методов, а также методов корпусной лингвистики, включая создание специализированных корпусов речи билингвов, говорящих на русском языке. В проекте будет сформирована интегративная модель процессов активации перцептивного опыта и амодальных представлений носителей русского языка как родного и билингвов. Это потребует поэтапного создания и анализа частных моделей, отражающих особенности когнитивной обработки языка различными категориями участников, после чего будет построена интегративная модель с учетом ключевых параметров: тип ментальных репрезентаций, тип языка и тип билингвизма. Для реализации проекта будут использованы как экспериментальные методы, так и вычислительные методы анализа текстовых данных, в частности, с использованием NLP и машинного обучения. Особое внимание будет уделено анализу амодальных репрезентаций, стимулированных языковым опытом, что позволит создать векторные пространства значений слов для различных групп участников. Эксперименты также включат использование материалов Генерального Интернет-корпуса Русского Языка, что позволит оценить специфику амодальных репрезентаций на большом объеме текстов. Итогом проекта станет создание теоретических моделей когнитивных процессов взаимодействия языкового и перцептивного опыта разных категорий носителей русского языка. Результатом проекта будут выявленные векторные пространства значений, данные о когнитивной динамике при выполнении задач на восприятие речи на русском языке, которые найдут применение в дальнейших исследованиях.

Ожидаемые результаты
В результате выполнения проекта будут 1. созданы специально размеченные корпусы русской речи двух типов билингвов: херитажных (ранних естественных несбалансированных) и учебных (функциональных, поздних, несбалансированных), подготовленные для применения методов векторизации и иных процедур автоматической обработки при решении разных задач, связанных с изучением языкового опыта, речевых практик билингвов; 2. смоделированы пять векторизованных пространств относительно семантических центров – пяти модальностей восприятия с использованием различных дистрибутивных семантических моделей на основе текстов Генерального Интернет-корпуса русского языка, интерпретирующих языковой опыт носителей русского языка как родного, которые впоследствии возможно широко использовать для исследований семантики лексических единиц русского языка; 3. аналогичные векторизованные пространства – на основе текстов двух созданных специализированных корпусов речи с применением наиболее результативных дистрибутивных моделей, интерпретирующие языковой опыт носителей херитажного и функционального билингвизма; 4. построены 3 модели перцептивного опыта носителей русского языка как родного, херитажных и учебных билингвов, основанные на анализе сенсорных норм по оценкам носителей трех вариантов русского языка на материале психолингвистических баз данных; 5. получены данные о времени реакции на слова трех частей речи (существительных, прилагательных и глаголов) при выполнении разных психолингвистических задач; 6. построены 3 модели взаимодействия перцептивного и языкового опыта при выполнении основных психолингвистических задач носителями русского языка как родного и носителями двух типов билингвизма; 7. создана интегративная модель сходств и различий взаимодействия перцептивного и языкового опыта при выполнении основных психолингвистических задач билингвами и носителями русского языка как родного. Решение данной задачи является вкладом в решение фундаментального вопроса о природе ментальных репрезентаций и их вариативности в сознании разных типов носителей языков. Вопрос об этих репрезентациях, возникающий в результате анализа достижений когнитивной науки и лингвистики, носит комплексный и междисциплинарный характер, затрагивая взаимосвязь языкового опыта с процессами формирования и активации ментальных образов. Глобализация и распространение би- и полилингвальных ситуаций, особенно в России, где сосуществуют различные формы билингвизма, актуализирует вопрос о том, каким образом хранятся ментальные репрезентации объектов при наличии двух языков у одного носителя. Проект призван ответить на этот исследовательский вопрос, чем определяется его социальная значимость. Для создания многофакторной модели когнитивных процессов обработки языка, которая учитывает особенности носителей языка (билингвы, моноязычные) и когнитивные факторы, влияющие на типы взаимодействия амодальных и перцептивных репрезентаций будет применен междисциплинарный методологический синтез: методы автоматической обработки языка (NLP), экспериментальные психолингвистические, корпусные методы, что подчеркивает значимость для развития методологии современных гуманитарных исследований.


 

ОТЧЁТНЫЕ МАТЕРИАЛЫ


Аннотация результатов, полученных в 2025 году
Проект направлен на исследование соотношения модальных (перцептивных) и амодальных (языковых) ментальных репрезентаций, формирующихся на основе сенсорного и языкового опыта, и их роли в когнитивной обработке и использовании родного и изучаемого языка. Проблема взаимодействия между модальными и амодальными представлениями в процессе понимания языка решается с использованием междисциплинарных экспериментальных психолингвистических методов, методов автоматической обработки языка (NLP), методов корпусной лингвистики. На первом этапе выполнения проекта были получены промежуточные результаты об особенностях перцептивных репрезентаций носителями русского языка как родного и билингвами, а также амодальных репрезентаций носителей русского языка как родного в процессах когнитивной обработки и использования русского языка. Для выявления особенностей перцептивных репрезентаций в процессах когнитивной обработки единиц русского языка тремя группами респондентов построены 3 модели перцептивного опыта а) базовая модель перцептивных репрезентаций в когнитивных процессах русского языка как родного, включающая 5 перцепций (модальностей восприятия), а также их данные об их внутреннем строении и их взаимных отношениях в процессах восприятия и когнитивной обработки единиц – степень активации каждой из пяти перцепций, доминантность модальностей, степень эксклюзивности модальностей для лексического ряда или конкретных слов. Модели перцептивного опыта херитажных и учебных билингвов, включают те же компоненты, что и базовая, и дополнительно – данные о социальном и языковом опыте респондентов: время усвоения второго языка, характер использования родного и усваиваемого языка в актуальное время. Модели созданы с использованием материалов психолингвистических и социолингвистических баз данных RuWordPerception, UzRusWordPerception, RuTurkSocLing, UzRusSocLing, созданных в Лаборатории лингвистической антропологии Томского государственного университета. На основе данных моделей представлено аналитическое описание репрезентации перцептивного опыта носителями русского языка как родного и билингвами двух типов. Были выявлены сдвиги в степени активации элементов модели и их соотношений в трех построенных моделях: 1) более низкая степень проявленности перцепций у херитажных билингвов, а у учебных билингвов – более высокая; 2) более тесные отношения между базовыми элементами модели у учебных билингвов; 3) различия в влиянии грамматической и лексико-грамматической категоризации на исследуемые процессы в зависимости от типа билингвизма; 4) различный состав 4 классов лексических единиц с доминантными модальностями и охарактеризованных по параметру эксклюзивности модальностей. С целью выявления особенностей амодальных репрезентаций, базирующихся на языковом опыте, было построено пять векторных пространств на основе корпуса TAIGA для моделей word2vec, fastText, GloVe, RuBERT и XLM-RoBERTa. Статические модели (word2vec, fastText и GloVe) формируют одну фиксированную репрезентацию для каждого слова. Модель Word2vec была включена в качестве базовой и устойчивой точки отсчёта; fastText, благодаря учёту субсловных n-грамм, улучшает обработку морфологически сложных форм; GloVe, опирающаяся на глобальные статистики ко-встречаемости, позволяет выявлять масштабные семантические закономерности корпуса. Контекстуальные модели RuBERT и XLM-RоBERTa обеспечивают генерацию контекстно-зависимых представлений, что делает их особенно чувствительными к полисемии и более тонким семантическим различиям; RuBERT отражает особенности русскоязычных данных, тогда как XLM-RoBERTa позволяет оценить применимость многоязычных архитектур для задач, требующих типологической чувствительности. Тестирование моделей для решения задач проекта, выявило, что наилучшие показатели продемонстрировала модель GloVe: GloVe использует глобальные статистики совместной встречаемости слов, что позволяет более полно извлечь семантические зависимости, лежащие в основе стабильных, неконтекстуальных ассоциаций, характерных для перцептивной лексики. В результате был получен не только набор из пяти векторизованных пространств, но и валидированный инструментарий для анализа: лучшие якорные слова для сенсорных доменов и наиболее надёжную модель для вычисления семантических расстояний в задачах, связанных с перцептивным опытом. Для операционализации понятия языкового опыта, то есть тех регулярностей в языковом употреблении, которые отражают перцептивные особенности человеческого опыта, был проведен анализ якорных слов, то есть слов, которые служат отправной точкой для измерения расстояний в семантическом пространстве и позволяют оценивать степень выраженности определённого перцептивного опыта. В качестве первичных якорных стимулов были выбраны пять эффекторных лексем, непосредственно связанных с функционированием отдельных сенсорных модальностей (глаз, ухо, рука, язык, нос), что позволило операционализировать сенсорные домены в пространстве естественного языка и сопоставить полученные результаты с использованием разных моделей. Дальнейшее развитие проекта направлено на выявление влияния фактора билингвизма на исследуемые процессы. На данном этап проведена подготовительная работа для получения запланированного результата. В результате направленной трансформации материалов «Бимодального корпуса устной речи жителей южно-сибирского региона» (RuTuBic). подготовлен корпус, специализированный для задач векторизации как статическими методами (word2vec, fasttext, glove), так и контекстными (RuBERT, XLM-RoBERTa). Также подготовлены текстовые материалы для корпуса русской речи учебных билингвов, которые станут основой создания второго специализированного корпуса. Оба корпуса послужат основой моделирования языкового опыта билингвами двух типов, связанного с обработкой модальностей восприятия при использовании русского языка.

 

Публикации

1. Коршунова И. С., Резанова З. И., Махмудов У. Р. Актуализация перцептивного опыта при формировании общих концептов в условиях русско-тюркского контактирования: доминантная и эксклюзивная модальность Русин, Русин. №81. (год публикации - 2025)