ИИ улучшает выполнение домашних заданий, но ухудшает результаты экзаменов - исследование

Использование генеративного искусственного интеллекта помогает школьникам быстрее выполнять домашние задания и получать более высокие оценки, но со временем может ухудшать результаты самостоятельных экзаменов. К такому выводу пришли авторы нового исследования китайского среднего образования.

Экономисты Дэвид Стремберг, Виктор Лей и Яньхуэй Ву проанализировали данные 26 811 китайских учеников 7-12 классов за 30 месяцев. В выборку вошли результаты домашних заданий, время их выполнения, ежемесячные экзамены с запретом на использование сторонней помощи, а также вступительные испытания в старшую школу и университеты.

После начала использования генеративного ИИ оценки за домашние задания выросли в среднем на 18%, а время их выполнения сократилось на 30%. Таким образом, технология давала ученикам быстрый и заметный прирост производительности.

В то же время уже в течение шести месяцев результаты ежемесячных экзаменов снижались примерно на 20%. На вступительных испытаниях падение составило 18% и 24% в зависимости от типа экзамена, а полный негативный эффект проявлялся примерно через два года.

Исследователи объясняют это тем, что ИИ может выполнять часть умственной работы вместо ученика. Домашнее задание формально становится правильнее, однако школьник тратит меньше времени на самостоятельное осмысление материала, поиск решения и закрепление знаний.

Авторы использовали разницу во времени, когда разные ученики начинали применять ИИ, чтобы сравнить изменение их результатов. Однако работа опубликована как дискуссионный доклад Centre for Economic Policy Research, поэтому ее выводы еще не стоит считать окончательным научным консенсусом.

Исследование также не доказывает, что любое использование ИИ обязательно вредит обучению. Результат может зависеть от того, просит ли ученик объяснить тему и проверить собственное решение или просто поручает чат-боту полностью выполнить задание.

Для украинских школ, университетов и родителей результаты поднимают вопрос о том, как оценивать реальные знания учеников. Обычные домашние работы все хуже показывают, насколько самостоятельно ребенок освоил материал, поэтому возрастает роль контрольных заданий в классе, устных ответов и практических проверок.

Для работодателей риск похож: работник может быстрее готовить тексты, расчеты или презентации с помощью ИИ, но без базовых знаний не всегда способен проверить результат, заметить ошибку или выполнить задание самостоятельно.

Исследование опубликовано как дискуссионная работа Centre for Economic Policy Research.