dumaiВидео людей помогли роботам справляться с новыми задачами
Препринт, ещё не рецензирован · ранние данные
Кратко
Авторы обучали модель на 50 000 часах видео, снятых от первого лица, а затем — на данных о действиях людей и роботов. В компьютерном испытании роботы успешно выполнили 84,60% попыток на случайных вариантах задач. Физические роботы приспосабливались к незнакомым целям, которые им показывали, без изменения модели.
Зачем это знать?
Открытые записи человеческих действий и материалы для обучения позволят другим разработчикам проверять, как роботы осваивают новые задачи. Основные численные результаты получены в компьютерной среде.
Разбор
Авторы изучили, как объём обучающих видео связан с успехом роботов. Они использовали записи от первого лица с пометками о движениях рук и описаниями действий, а затем проверяли результаты в компьютерной среде.
Обучение на разных данных дало разные результаты. Модель, которую сначала обучали только на видео людей, после дополнительного обучения на данных роботов справилась с 68.88% попыток на случайных вариантах задач. Модель, которую сначала обучали на данных и людей, и роботов и которой показывали цель, достигла 84.60%. В другом компьютерном наборе задач первая модель выполнила в среднем 14.17% попыток.
Ключевые цифры
Можно ли доверять
Авторы проверяли модели в компьютерной среде, а одну из них — также на физических роботах с незнакомыми целями. Для физических испытаний численные результаты и число попыток не приведены, поэтому по ним нельзя оценить, насколько часто роботы справлялись с задачами.
- Это препринт, а не прошедшая рецензирование статья.
- Основные показатели получены в симуляции; физические эксперименты описаны без подробностей о масштабе и условиях проверки.
- Данные и обучение предназначены для робототехники, поэтому прямого практического вывода для обычного человека нет.
Пересказано ИИ по научной статье. Это научпоп, а не совет врача. Как это устроено