На уроках программирования помощник с ИИ часто не замечал ошибок детей
Препринт, ещё не рецензирован · ранние данные
Кратко
23 пятиклассника и шестиклассника решали задачи в Scratch — программе для обучения программированию. Голосовой помощник давал понятные и применимые подсказки, но в 61,5% из 603 реплик об ошибках не заметил уже существующие ошибки. При этом 39,1% детей считали его ответы всегда правильными.
Зачем это знать?
Понятная речь помощника не гарантирует, что он заметит ошибку. Результаты относятся к одному помощнику и небольшой группе школьников.
Разбор
Исследователи сначала проверили помощника на восьми заданиях без детей, а затем предложили эти задания школьникам после шести уроков программирования. Ученики общались с помощником голосом, показывали ему экран и после работы заполнили анкету.
В предварительной проверке помощник пропускал ошибки реже: в 15,7% реплик об ошибках против 61,5% на уроках. Ни в одной отдельной реплике он не давал полного решения. Дети обычно говорили коротко и в основном отвечали помощнику. Перед работой им показывали видео с предупреждением, что его ответы могут быть неверными.
Ключевые цифры
Можно ли доверять
Исследователи наблюдали за работой 23 школьников с одним помощником и сравнили его ответы с предварительной проверкой без детей. Группа была небольшой, а условия двух проверок различались, поэтому результаты нельзя безоговорочно переносить на других детей и помощников.
- Это препринт, ещё не прошедший рецензирование.
- В исследовании участвовали 23 школьника, поэтому результаты нельзя уверенно обобщать на всех детей и ИИ-репетиторов.
- Исследование было разведочным и проводилось в рамках конкретных заданий Scratch и одного репетитора.
Пересказано ИИ по научной статье. Это научпоп, а не совет врача. Как это устроено