Nvidia научила роботов осваивать тонкие движения по видео с людьми

Nvidia научила роботов осваивать тонкие движения по видео с людьми

Nvidia представила GR00T 2 — открытую ИИ-модель для обучения роботов точным движениям рук. Она может перенимать навыки из видео с людьми и нескольких демонстраций конкретной задачи.

Компания показала разработку на Conference on Robot Learning в Остине. Nvidia называет GR00T 2 «моделью мира и действий». Перед движением система прогнозирует, как оно изменит наблюдаемую сцену.

Для обучения использовали данные роботов и 100 тысяч часов видео от первого лица. Этот набор Nvidia планирует открыть для сторонних разработчиков. По заявлению компании, подход помогает переносить навыки между роботами с разным устройством тела.

На тестах GR00T 2 смогла хотя бы один раз выполнить 40 из 50 заданий без специального обучения под каждое из них. После одной демонстрации средняя доля успешных попыток составила 71%, после пяти — 95%.

В исследовании Nvidia указано, что для проверки выбрали задачи, которые модель уже умела хорошо осваивать. Поэтому цифры не показывают, насколько надежно система справится с произвольной работой в реальных условиях.

GR00T 2 уже тестируют несколько компаний. Foxconn применяет модель в проектах по сборке серверов для ИИ, Siemens проверяет ее на заводских операциях, а Nexuni — на работе с бельем. О внедрении системы в серийное производство ни одна из них пока не объявила.

Одновременно Nvidia выпустила Isaac Lab 3.0 — открытую платформу для обучения роботов в симуляции. В одном из тестов новая версия ускорила обучение до 2,5 раза.

Предыдущие версии GR00T уже используются в разрабатываемых роботах, включая гуманоида LG, выход которого намечен на 2027 год. GR00T 2 показала высокие результаты в отобранных тестах, но до подтвержденной работы на производстве модель еще не дошла.

Юлия Самойлова
Юлия Самойлова

Пишет о технологиях искусственного интеллекта с 2019 года. Специализируется на материалах о практическом применении ИИ в различных отраслях.