Успех российских ученых: серебряные медали на конкурсе по применению ИИ для анализа математических заблуждений

Российские учёные стали серебряными призёрами престижного международного конкурса Eedi – Mining Misconceptions in Mathematics, который был посвящён применению искусственного интеллекта для разработки тестов, направленных на выявление распространённых математических ошибок у учащихся.

В соревновании приняли участие более 1400 команд из 80 стран. Российская команда, в которую вошли представители Института искусственного интеллекта AIRI, Сколтеха и компании VeinCV, продемонстрировала впечатляющие результаты.

Их метод базировался на языковой модели Qwen, которая была обучена на обширном наборе данных, включающем как реальные ошибки учащихся (4000 примеров), предоставленные организаторами, так и 13000 синтетических примеров, созданных самой командой. Модель обучалась на парах «вопрос — неверный ответ», определяя наиболее вероятное математическое заблуждение, лежащее в основе неверного решения.

Российские учёные, наряду с несколькими зарубежными группами, предложили эффективные методы адаптации больших языковых моделей для автоматической генерации подобных заданий. Ожидается, что разработка российских исследователей найдёт широкое применение в онлайн-платформах для обучения математике.

Конкурс был организован с целью привлечь внимание к проблеме автоматизированного создания тестовых заданий, направленных на выявление пробелов в математических знаниях. Традиционный ручной подход к созданию таких заданий, включающий специально сформулированные ложные ответы, крайне трудоёмок.

Соревнование было организовано британской образовательной компанией Eedi совместно с Университетом Вандербильта в США и Learning Agency Lab.