dumaiВидео людей помогли роботам чаще выполнять новые задачи: с 2% до 60%
Препринт, ещё не рецензирован · ранние данные
Кратко
Программа RoboTryOn заменяет человека на видео изображением нужного робота, сохраняя задачу, предметы и фон. В опытах с несколькими человекоподобными роботами обучение на таких записях повысило среднюю долю успешных попыток с 2% до 60%. Результат был сравним с обучением на записях роботов под дистанционным управлением, а сбор данных стоил примерно треть от прежней суммы.
Зачем это знать?
Обучение по переделанным видео людей может уменьшить расходы на освоение роботами новых задач без записи движений настоящего робота. Насколько хорошо способ сработает на других моделях роботов, ещё неясно.
Разбор
Чтобы переделать запись, программа сначала меняет отдельные кадры, а затем использует их и движения кистей человека для создания видео. По получившейся записи и сведениям о глубине изображения она определяет, какие действия должен выполнить робот.
Среди новых задач были и сложные действия двумя руками. Для обучения этим задачам авторы не записывали движения настоящих роботов.
Ключевые цифры
Можно ли доверять
Авторы провели опыты с несколькими человекоподобными роботами и новыми задачами, сравнив обучение на переделанных видео с обучением на записях роботов под дистанционным управлением. Как этот способ сработает на других моделях роботов, пока неизвестно.
- Это препринт, поэтому результаты ещё не прошли рецензирование.
- Результаты получены в экспериментах на нескольких гуманоидных роботах; переносимость на другие платформы и реальные условия неясна.
- Демонстрации для новых задач были синтетическими, а не собранными на реальном роботе.
Пересказано ИИ по научной статье. Это научпоп, а не совет врача. Как это устроено