Уроки шахмат на видео помогли ИИ лучше начинать игру
Препринт, ещё не рецензирован · ранние данные
Кратко
Систему проверили на 72 обучающих видео о 12 вариантах начала шахматной партии. На тестовых вопросах её результат превысил результат исходной модели: относительный прирост составил до 91%. В 69% очных партий система занимала в начале игры более сильную позицию, чем исходная модель.
Зачем это знать?
ИИ сохранял содержание видео в памяти и использовал его без изменения самой модели. Такой способ может помочь ему учиться по видео, хотя основная проверка касалась шахмат.
Разбор
Система готовилась к вопросам по видео в два этапа: собирала сложные вопросы по их содержанию и с их помощью улучшала записи в памяти. Чтобы ответить на новый вопрос, она искала нужные записи по оглавлению, используя свои рассуждения.
Чем больше видео система изучала, тем лучше отвечала на вопросы. На вопросах, использованных при подготовке, её результат вырос относительно исходной модели до 113%. Авторы также проверили способ в другой области, но не уточнили какой.
Ключевые цифры
Можно ли доверять
Систему сравнивали с исходными моделями на вопросах по 72 шахматным видео и в очных партиях. Это показывает улучшение в проверенных условиях, но авторы не указали число партий и не описали вторую область проверки, поэтому судить о работе способа за пределами шахмат трудно.
- Это препринт, а не прошедшее рецензирование исследование.
- Основной benchmark построен на 72 видео о 12 шахматных дебютах; переносимость на другие задачи подтверждена только дополнительной оценкой, детали которой в аннотации не приведены.
- Проценты указаны как относительный прирост по сравнению с базовыми моделями, а не как абсолютная точность.
Пересказано ИИ по научной статье. Это научпоп, а не совет врача. Как это устроено