Google выпустил первую локальную модель Gemini Robotics On-Device

Компания Google представила крутейшую модель Gemini Robotics On-Device. Это 1 в мире решение, объединяющее компьютерное зрение, языковое понимание и физические действия в едином локальном пакете. Которое освобождает роботов от постоянной зависимости от облачных вычислений!

Уникальность новой модели заключается в её универсальности. Она работает как с гуманоидными платформами, так и с промышленными 2-рукими манипуляторами. Впечатляет и способность системы выполнять сложнейшие 2-ручные операции. От манипуляций с мелкими предметами до сборки конструкций и переноса объектов.

Отлично работает и эффективность обучения. Модели достаточно всего 100 демонстраций для освоения новых действий! При этом изначально система тренировалась только на датасете ALOHA с человеческими инструкциями. Но смогла перенести знания на разнообразные робототехнические платформы.

Google одновременно выпустила SDK Gemini Robotics. Это набор инструментов для разработчиков, позволяющий кастомизировать модель под специфические задачи.

Полностью автономная работа для роботов открывает огромные возможности для применения в условиях нестабильной связи. Или при задачах, требующих минимальной задержки отклика. И это может быть стартом новой эры по-настоящему самостоятельных роботов!