Больше не нужно искать — необходимые
обучающие материалы и подсказки всегда под рукой

Компания Google DeepMind представила Gemini Robotics 2 — модель класса VLA (зрение-язык-действие), которая позволяет управлять роботом всем телом. Также была анонсирована система ER 2, предназначенная для сложного планирования и координации работы нескольких роботов одновременно.
Gemini Robotics 2 преобразует текстовые и визуальные данные в моторные команды. Модель подходит для роботов различных конструкций — от небольших настольных манипуляторов до человекоподобных роботов в полный рост.
По сравнению с предыдущей версией, искусственный интеллект теперь контролирует не только верхнюю часть корпуса. Роботы научились ходить, приседать, наклоняться, дотягиваться до предметов и поднимать их даже в ограниченном пространстве.
В ходе демонстрации гуманоид Apptronik Apollo 2 под управлением Gemini Robotics 2 успешно поднимал лейку, доставал бейсбольную перчатку с полки и находил нужные объекты.
Кроме того, Google DeepMind отметила улучшенную моторику: модель поддерживает сложные манипуляторы с 22 степенями свободы и может выполнять точные операции, такие как завязывание узлов, закрытие пакетов или замена лампочек.
Обновление также затронуло модель ER 2, которую разработчики называют «высокоуровневым мозгом» для роботов. Эта система способна планировать многоэтапные задачи, контролировать выполнение действий и при необходимости повторять их, а также распределять задания между несколькими роботами.
Например, в одном из видео Apollo 2 поручает двухрукому роботу Google складывать инструменты в контейнер во время уборки гаража.
Дополнительно была представлена локальная версия Gemini Robotics On-Device 2. Она функционирует без интернета и может адаптироваться к новым роботам всего за несколько часов обучения, используя менее 200 примеров.
В настоящее время Gemini Robotics 2 доступна в режиме приватного просмотра, ER 2 — через Gemini API и Google AI Studio, а On-Device 2 тестируется доверенными партнерами.
Напомним, что в июле компания Humanoid продемонстрировала метод обучения роботов на реальных производственных задачах.
Популярные лонгриды: