Показ вариантов помогал ИИ лучше подбирать планы поездок, чем расспросы
Препринт, ещё не рецензирован · ранние данные
Кратко
Авторы изучили 5 800 запросов, которые ИИ пересмотрел для планирования поездок и покупок; вместо пользователей отвечала программа, чьи реакции проверили люди. Один верно найденный компромисс позволял находить приемлемый план до 4,6 раза чаще. Агенты, которые задавали вопросы о предпочтениях, учитывали не более 32% подходящих планов.
Зачем это знать?
Реакция на конкретные варианты может помочь ИИ обнаружить компромиссы, которые человек не предусмотрел в исходном запросе.
Разбор
Авторы сравнивали, какие планы оставались доступными после изменения запросов. Они разобрали 5 800 запросов для планирования поездок и покупок, исправленных ИИ. Вместо пользователей на предложения отвечала программа, а её реакции проверили люди.
Один правильно найденный компромисс открывал доступ более чем к 52% приемлемых планов. Для сравнения: агенты, расспрашивавшие о предпочтениях, учитывали не более 32%. Чем лучше исправленный запрос охватывал приемлемые планы, тем чаще программа находила подходящий вариант.
Ключевые цифры
Можно ли доверять
Авторы проверили 5 800 исправленных запросов для поездок и покупок, сравнив доступные планы с теми, которые принимала программа, заменявшая пользователя. Её реакции проверили люди, но в описанном сравнении отвечала программа, поэтому результат не показывает напрямую, как такой подход сработает с реальными пользователями.
- Это препринт, а не прошедшая рецензирование статья.
- Результаты получены на бенчмарке с моделируемым пользователем, хотя его реакции были проверены людьми.
- Проверены сценарии путешествий и покупок и две семейства моделей; переносимость на другие задачи и агентов не установлена.
Пересказано ИИ по научной статье. Это научпоп, а не совет врача. Как это устроено