Google выпустил первую локальную модель Gemini Robotics On-Device

Post Thumbnail

Компания Google представила крутейшую модель Gemini Robotics On-Device. Это 1 в мире решение, объединяющее компьютерное зрение, языковое понимание и физические действия в едином локальном пакете. Которое освобождает роботов от постоянной зависимости от облачных вычислений!

Уникальность новой модели заключается в её универсальности. Она работает как с гуманоидными платформами, так и с промышленными 2-рукими манипуляторами. Впечатляет и способность системы выполнять сложнейшие 2-ручные операции. От манипуляций с мелкими предметами до сборки конструкций и переноса объектов.

Отлично работает и эффективность обучения. Модели достаточно всего 100 демонстраций для освоения новых действий! При этом изначально система тренировалась только на датасете ALOHA с человеческими инструкциями. Но смогла перенести знания на разнообразные робототехнические платформы.

Google одновременно выпустила SDK Gemini Robotics. Это набор инструментов для разработчиков, позволяющий кастомизировать модель под специфические задачи.

Полностью автономная работа для роботов открывает огромные возможности для применения в условиях нестабильной связи. Или при задачах, требующих минимальной задержки отклика. И это может быть стартом новой эры по-настоящему самостоятельных роботов!

Почитать из последнего
ChatGPT за 21 день убедил нормального мужика, что он открыл формулу уничтожения интернета
Рекрутёр Алан Брукс лёг на диван в своём доме в Канаде. В 47 лет можно и отдохнуть. Включил сыну видео про число пи и вечером задал ChatGPT невинный вопрос: объясни, что это такое? Через 21 день он рассылал предупреждения по всему интернету о том, что открыл математическую формулу, способную уничтожить интернет. Параллельно разрабатывал жилет-силовой щит и левитационный луч. Он не наблюдался у психиатра. Просто человек с телефоном и чатботом.
Вайб-кодинг убивает Open Source - и это проблема для всех
Исследователи из Центрально-Европейского университета в Вене обнаружили жёсткую закономерность. Вайб-кодеры только потребляют ресурсы, но ничего не отдают обратно. Откуда нейросеть может взять знания? А берет она их из Open Source. Из тех самых бесплатных библиотек и фреймворков, которые энтузиасты создавали 10летиями.
Как уболтали ИИ-бота на скидку 80%
Владелец небольшого бизнеса в Англии поставил на сайт чат-бота на ИИ, чтобы он отвечал на вопросы клиентов по ночам. Полгода всё работало идеально — бот консультировал и помогал оформлять заказы, даже продажи росли. А потом нашёлся 1 хитрец, который за час беседы выманил у искусственного интеллекта скидку 80% на заказ в £8000.