КАРТОЧКА ПРОЕКТА ФУНДАМЕНТАЛЬНЫХ И ПОИСКОВЫХ НАУЧНЫХ ИССЛЕДОВАНИЙ,
ПОДДЕРЖАННОГО РОССИЙСКИМ НАУЧНЫМ ФОНДОМ
Информация подготовлена на основании данных из Информационно-аналитической системы РНФ, содержательная часть представлена в авторской редакции. Все права принадлежат авторам, использование или перепечатка материалов допустима только с предварительного согласия авторов.
ОБЩИЕ СВЕДЕНИЯ
Номер проекта 25-28-01485
НазваниеРазработка концептуальной модели и методологии оценки ИИ-грамотности как основа преобразования ландшафта образования через технологические инновации
Руководитель Тарасова Ксения Вадимовна, Кандидат педагогических наук
Организация финансирования, регион федеральное государственное автономное образовательное учреждение высшего образования "Национальный исследовательский университет "Высшая школа экономики" , г Москва
Конкурс №102 - Конкурс 2025 года «Проведение фундаментальных научных исследований и поисковых научных исследований малыми отдельными научными группами»
Область знания, основной код классификатора 08 - Гуманитарные и социальные науки; 08-604 - Теория и методология инновационных процессов в образовании, экспериментальная и инновационная деятельность в образовании
Ключевые слова ИИ-грамотность, обучение и преподавание с использованием ИИ, ИИ в образовании, оценка ИИ-грамотности, концептуальная модель, психометрика
Код ГРНТИ14.15.23
ИНФОРМАЦИЯ ИЗ ЗАЯВКИ
Ожидаемые результаты
Главным результатом проекта станет прототип нового теста для оценивания уровня сформированности ИИ-грамотности, разработанный с учетом возможности адаптации на разный возраст обучающихся, с учетом российского культурного контекста и в соответствии с международными критериями качества тестов. В рамках исследования будут учтены достижения психометрики для измерения комплексных латентных конструктов и прототип будет готов для апробации и в дальнейшем станет основой создания финального продукта для оценивания ИИ-грамотности.
Оригинальным вкладом исследования в педагогическую теорию и практику станут:
- концептуальная модель ИИ-грамотности, как основа для разработки инструментов оценивания и учебных программ;
- подходы и методология измерения комплексного латентного конструкта ( конструкт - совокупность явлений или явление, которое мы собираемся исследовать, Mislevy, 2018) ИИ-грамотность;
- описание ключевых концепций, состава и требуемых уровней сформированности ИИ-грамотности в зависимости от целей тестирования и характеристик тестируемых, которые станут основой для выбора метода и проведения установки стандартов для инструмента измерения ИИ-грамотности;
- требования к разработке стандартизированных инструментов оценивания ИИ- грамотности на разных уровнях образования, в т.ч. с учетом необходимости проверки навыков в аутентичных средах.
- прототип инструмента оценки ИИ-грамотности.
Полученные результаты внесут значительный вклад в педагогическую теорию и практику, а также в развитие методологии измерения сложных конструктов и исследований в области искусственного интеллекта. Подобные результаты и разработки будут востребованы как отечественными, так и зарубежными исследователями, так как соответствуют научной проблематике мирового уровня.
ОТЧЁТНЫЕ МАТЕРИАЛЫ
Аннотация результатов, полученных в 2025 году
В отчетный период выполнен комплекс научно-исследовательских работ, направленных на формирование научно обоснованной модели ИИ-грамотности, разработку аутентичных моделей заданий и эмпирическую верификацию ключевых положений посредством качественных и количественных методов.
Теоретико-аналитический этап. Проведен систематический анализ современного состояния исследований в области ИИ-грамотности, включая теоретические модели, международные нормативные рамки и существующие инструменты измерения. Скопинг-ревью, выполненное по протоколу PRISMA-ScR, позволило выявить фрагментарность концептуализаций и неоднородность терминологического аппарата, что определило необходимость построения оценочно-ориентированной рамки, согласованной с международными подходами и задачами образовательной политики.
Разработка концептуальной модели ИИ-грамотности. На основе многоэтапной реконструкции содержания – анализа глобальных рамок, эмпирических исследований и теоретических моделей, систематической семантической декомпозиции и последующего аффинити-картирования – сформирована четырехкомпонентная структура ИИ-грамотности, интегрирующая когнитивные, операциональные, аналитические и рефлексивно-нормативные аспекты взаимодействия человека с системами искусственного интеллекта. Модель обладает достаточной степенью общности для различных уровней образования:
1. Знание и понимание ИИ (Knowledge & Understanding of AI)
Данный домен включает совокупность компетенций, необходимых для распознавания, объяснения и анализа фундаментальных принципов работы систем искусственного интеллекта, включая машинное обучение, алгоритмы, данные и их роль в обучении моделей.
2. Взаимодействие с ИИ (AI Interaction)
Данный домен отражает способность целенаправленно, результативно и осознанно взаимодействовать с ИИ-системами для достижения поставленных целей. Компетентность в этой области включает весь процесс взаимодействия: формулирование структурированных запросов, интерпретацию ответов ИИ, корректировку запросов, адаптацию стратегии взаимодействия.
3. Оценивание результатов, полученных с помощью ИИ (AI Judgment)
Этот домен описывает компетентность в критическом, аналитическом и этически ориентированном оценивании результатов, создаваемых системами ИИ. Он включает проверку надежности, точности, логической последовательности и уместности ИИ-выходов, а также анализ возможных рисков и последствий.
4. Агентность и метакогниция (AI Agency & Metacognition)
Этот домен отражает способность человека самостоятельно регулировать свое взаимодействие с ИИ, осознавать ограничения технологий, принимать взвешенные решения о целесообразности использования ИИ, а также понимать более широкие социальные и этические последствия его применения.
Разработаны уровневые дескрипторы (PLDs), фиксирующие прогрессию овладения конструктом от базового уровня к стратегическому. Модель задает методологическую основу для формализации измерительных процедур, разработки стандартизированных инструментов и проведения стандарт-сеттинга.
На основе результатов систематического анализа и данных эмпирического исследования (n = 3732) сформулирован комплекс научно обоснованных требований к разработке инструментов для разных уровней образования. Ключевые положения включают: необходимость строгого соответствия Evidence-Centered Design; использование аутентичных сценариев в симуляционной среде с фиксацией как результата, так и процессных данных (лог-данные, траектории взаимодействия, корректировки запросов); применение многомерных моделей, способных интегрировать гетерогенные данные (категориальные, континуальные, временные, поведенческие); обеспечение масштабируемости инструментов под возрастные группы при сохранении сопоставимости доменной структуры и принципов интерпретации. Эти требования образуют нормативно-методический каркас для разработки валидных и стандартизируемых инструментов.
По итогам реализации этого этапа проекта опубликованы две статьи в журналах, индексируемых в Scopus (в т.ч. Высшее образование в России, Q2), подготовлена статья в журнал PlosOne (Q1). Результаты представлены на пяти международных и всероссийских научных мероприятиях, включая профессиональные международные конференции, посвященные ИИ и оцениванию, в Китае и Казахстане.
Публикации
1.
Иванова А.Е., Тарасова К.В., Талов Д.П.
They Think They Use AI: Assessing the Relations Between Attitudes Toward AI and AI Proficiency Among University Students
IEEE (Institute of Electrical and Electronics Engineers) , Ivanova, A., Tarasova, K., & Talov, D. (2025, May). They Think They Use AI: Assessing the Relations Between Attitudes Toward AI and AI Proficiency Among University Students. In 2025 5th International Conference on Artificial Intelligence and Education (ICAIE) (pp. 26-29). IEEE. DOI: 10.1109/ICAIE64856.2025.11158702 (год публикации - 2025)
10.1109/ICAIE64856.2025.11158702
2.
А. Е. Иванова, К. В. Тарасова, Д. П. Талов
Между интересом и умением: как студенты воспринимают и применяют ИИ
Высшее образование в России, Иванова, А. Е., Тарасова, К. В., & Талов, Д. П. (2025). Между интересом и умением: как студенты воспринимают и применяют ИИ. Высшее образование в России, 34(8-9), 9-32. (год публикации - 2025)
10.31992/0869-3617-2025-34-8-9-9-32