Xiaomi сделала робота, который думает быстрее, чем вы моргаете

Post Thumbnail

Вы знаете Xiaomi как ребят, которые делают смартфоны и умные пылесосы. Ну ещё автомобили в последнее время. Так вот, теперь компания запустила собственную робототехническую модель Xiaomi-Robotics-0.

Это мозг для робота на 4.7 миллиарда параметров, который одновременно видит мир через камеры, понимает человеческие команды текстом и сам генерирует физические движения. Без заготовленных скриптов. Робот реально соображает на лету. И делает это за 80 миллисекунд. Вы моргнуть не успеете, а он уже решил, что делать дальше.

Самое интересное, что для этого не нужен серверный шкаф. Хватает одной видеокарты RTX 4090. Инженеры придумали хитрость: пока робот выполняет текущее движение, модель параллельно считает следующее. Поэтому никаких дёрганий и зависаний.

Под капотом — архитектура Mixture-of-Transformers, которая решает старую головную боль робототехники. Обычно когда модель учат двигать манипуляторами, она тупеет в понимании окружения. Здесь обучение шло одновременно на данных о мире и о действиях. Поэтому робот и думает, и работает руками без потерь. Проверяли на двуруком роботе — он разбирал Lego по цветам и складывал полотенца.

Xiaomi выложила всё в открытый доступ. Код, модели — берите, развивайте. Получается, компания, которая начинала с бюджетных телефонов, теперь учит роботов думать за миллисекунды. Если это не сигнал, что робототехника выходит из лабораторий в реальный мир — то что тогда сигнал?

Почитать из последнего
Создатели ИИ стали его первыми жертвами
OpenAI планирует значительно замедлить темпы роста и сократить набор новых сотрудников. По данным Business Insider, гендиректор Сэм Альтман заявил, что ИИ изменил темпы роста штата компании. Ирония ситуации в том, что создатели технологии, которая должна заменять людей, сами стали её первыми жертвами.
Oracle потеряла 463 миллиарда из-за паники вокруг ИИ
Акции Oracle рухнули более чем на 50 процентов по сравнению с прошлогодним историческим максимумом. Падение привело к снижению рыночной стоимости примерно на 463 миллиарда долларов по сравнению с рекордом, достигнутым 10 сентября. Когда компания представила впечатляющие перспективы облачного бизнеса и растущий спрос на ИИ. Тогда стоимость превысила 933 миллиарда долларов, что сделало её десятой по стоимости публичной компанией в США.
Магазины в США вытаскивают память и видеокарты из витринных ПК из-за воров
Американские магазины начали изымать модули оперативной памяти и видеокарты из витринных образцов игровых компьютеров из-за участившихся краж. Например, розничная сеть Costco столкнулась с проблемой настолько массово, что теперь показывает ПК вообще без внутренностей. Просто корпуса с работающей RGB-подсветкой и вентиляторами.
Airtable потеряла две трети стоимости и запустила ИИ, который её убьёт
Представьте: ваша компания рухнула с 11 миллиардов до 4, инвесторы в шоке, опционы сотрудников превратились в тыкву. Что делать? Логично было бы затаиться и латать дыры. Но основатель Airtable Хоуи Лю, делает ровно наоборот. Запускает совершенно новый продукт, который может похоронить его основной бизнес.
Гуманоид с бровями будет приносить вам зубные щётки в отеле
Американский стартап Fauna представил человекоподобного робота Sprout, и это не очередная железяка для склада. Его задача — быть компаньоном в гостиницах, ресторанах и магазинах. Принести стакан воды, подать зубную щётку, сопроводить до номера. Цена — 50 тысяч долларов, но Disney и Boston Dynamics уже среди первых покупателей.