Прогнозы ИИ о другом действии стали точнее в виртуальных мирах
Препринт, ещё не рецензирован · ранние данные
Кратко
Авторы предложили добавлять к наблюдаемому результату разницу между прогнозами для другого и совершённого действия. В четырёх виртуальных мирах показатель качества таких прогнозов вырос с 38–46% до 86–96%. Способ давал сбои при резких скачках и некоторых воздействиях внешних помех на команды.
Зачем это знать?
Если способ подтвердится на реальной технике, он может помочь понять, что помешало достичь цели: выбор действия или случайная помеха.
Разбор
Авторы проверяли прогнозы по изображениям из виртуальных миров: сравнивали предсказанный результат другого действия с тем, что происходило при той же помехе. Способ использовал данные о совершённых действиях, без примеров альтернативных исходов и без повторного обучения.
В виртуальном мире с подводным аппаратом показатель качества прогноза составил 90–94%, где 100% означало бы идеальное совпадение с результатами. Для этой проверки авторы использовали в 16 раз больше данных о совершённых действиях.
Авторы также искали задним числом действие, которое привело бы к цели. Их способ находил его в 35–69% случаев, а программа сравнения — в 14–23%. Программа сравнения знала устройство виртуального мира, но не знала исхода совершённого действия.
Ключевые цифры
Можно ли доверять
Способ проверили по изображениям из пяти виртуальных миров, в том числе мира с подводным аппаратом; в одном из испытаний его сравнили с другой программой поиска действий. На реальной технике способ не проверяли, а в виртуальных мирах он давал сбои при резких скачках и когда помеха меняла силу команды.
- Работа является препринтом и не прошла рецензирование.
- Эксперименты проведены в рендеренных симуляторах, а не на реальных системах.
- Метод опирается на предположение о плавной динамике и малом взаимодействии действия с возмущением; авторы указывают на сбои при контактах, координатных особенностях и масштабировании команды возмущением.
Пересказано ИИ по научной статье. Это научпоп, а не совет врача. Как это устроено