Сотрудники Apple совместно с учеными из MIT, Университета Карнеги-Меллона и Калифорнийского университета в Сан-Диего разработали новую методику обучения роботов. Результаты исследования опубликованы в научной работе под названием «Humanoid Policy ∼ Human Policy».
Главная цель проекта заключалась в создании более простого и быстрого способа обучения. Обычно роботы обучаются на собственных ошибках — с использованием данных, полученных в процессе выполнения задач. Однако такой подход требует значительного времени.
Ученые решили использовать адаптированные видео, в которых человек пошагово демонстрирует нужное действие. Для записи роликов применялось специальное приложение и гарнитура Apple Vision Pro, оснащенная камерами и датчиками, фиксирующими движения рук и головы пользователя. В некоторых случаях также использовалась камера ZED Mini с сенсорами глубины.
Благодаря новому подходу, экспериментальная платформа HAT (Human Action Transformer) смогла гораздо быстрее осваивать новые движения и задачи.
Содержание статьи