Google DeepMind анонсировала новые модели ИИ под названием Gemini Robotics, которые обещают произвести революцию в управлении роботами в реальном мире. Роботы, оснащённые системой Gemini Robotics, безупречно выполняют повседневные задачи по голосовым командам — от складывания бумаги до помещения очков в футляр.
Также, Gemini Robotics была специально обучена для обобщения поведения на различных типах робототехнического оборудования. Система устанавливает прямую связь между тем, что робот «видит», и действиями, которые он потенциально может совершить. DeepMind не ограничилась выпуском одной модели. Компания также представила упрощённую версию — Gemini Robotics-ER, которую исследователи могут использовать для обучения собственных моделей управления роботами.
В проведённых испытаниях Gemini Robotics продемонстрировала исключительную способность к адаптации, позволяя роботам эффективно работать даже в средах, которые не были включены в тренировочные данные. Это прорыв, который полностью меняет представление о возможностях искусственного интеллекта в робототехнике.
Кроме того, был разработан специальный критерий оценки под названием Asimov для измерения рисков, связанных с роботами, управляемыми ИИ.
В основе Gemini Robotics лежит передовая модель восприятия-языка-действия (VLA), построенная на базе Gemini 2.0, с добавлением физических действий в качестве новой выходной модальности для прямого управления роботами. В свою очередь, Gemini Robotics-ER — это модель Gemini с продвинутым пространственным пониманием, позволяющая робототехникам запускать собственные программы, используя возможности воплощённого рассуждения (ER).
Обе эти модели открывают беспрецедентные возможности, позволяя различным типам роботов выполнять широчайший спектр реальных задач. В рамках этого проекта Google DeepMind объявила о партнёрстве с компанией Apptronik для создания следующего поколения человекоподобных роботов на базе Gemini 2.0. Также компания уже работает с избранным числом доверенных тестировщиков, которые помогут определить будущее развития Gemini Robotics-ER.
