Post Thumbnail

Gemini Robotics : nouvelle approche du contrôle robotique par IA

Google a présenté le système Gemini Robotics, amenant les agents IA dans le monde physique. L’entreprise a développé un système d’agents avancé pour le contrôle des robots. Capable de mieux raisonner et planifier, interagir avec les humains et utiliser des outils comme la recherche web.

À l’intérieur du système, 2 modèles fonctionnent simultanément. Gemini Robotics-ER 1.5 et Gemini Robotics 1.5 remplissent différentes fonctions dans le contrôle robotique. Le premier modèle sert de cerveau de haut niveau, analyse l’environnement et les actions ou commandes humaines, crée un plan détaillé d’exécution de tâches et appelle des outils si nécessaire.

Gemini Robotics 1.5 agit comme exécuteur, transformant instructions en commandes motrices précises pour robot. Par exemple, lorsqu’on demande de trier correctement les déchets basé sur localisation utilisateur, le système fonctionne étape par étape.

Gemini Robotics-ER 1.5 analyse la demande, accède à internet pour comprendre règles de tri des déchets dans pays spécifique. Évalue déchets disponibles et donne commandes comme bouteille dans tas gauche, serviette dans droite. Le modèle produit trace de son raisonnement, rendant système plus interprétable.

Gemini Robotics 1.5 reçoit commandes d’ER et les transforme en trajectoires de mouvement précises. Si quelque chose change dans environnement durant processus, ER le remarque et corrige instructions. Lors de changement de forme du robot, système entier n’a pas besoin d’adaptation, ajuster second modèle suffit.

Gemini Robotics 1.5 est un modèle vision-langage-action, transformant informations visuelles et instructions en commandes robot, réfléchissant avant d’agir et expliquant son processus. Gemini Robotics-ER 1.5 est responsable de planification et décisions logiques, peut appeler outils numériques et créer plans étape par étape.

Les modèles permettent aux robots d’exécuter tâches complexes multi-étapes, apprendre de différents types d’appareils et agir plus transparemment et sûrement.

Auteur: AIvengo
Depuis 5 ans, je travaille dans l'apprentissage automatique et l'intelligence artificielle. Et ce domaine ne cesse de m'étonner, de m'inspirer et de m'intéresser.
Latest News
UBTech enverra des robots Walker S2 servir à la frontière chinoise pour $37 millions

L'entreprise chinoise UBTech a remporté un contrat de $37 millions. Et enverra des robots humanoïdes Walker S2 servir à la frontière de la Chine avec le Vietnam. South China Morning Post rapporte que les robots interagiront avec les touristes et le personnel, effectueront des opérations logistiques, inspecteront les marchandises et patrouilleront le territoire. Et caractéristiquement — ils peuvent changer leur batterie de manière autonome.

Anthropic a révélé accidentellement un document interne sur "l'âme" de Claude

Anthropic a révélé accidentellement "l'âme" de l'intelligence artificielle à un utilisateur. Et ce n'est pas une métaphore. C'est un document interne tout à fait concret.

Jensen Huang a ordonné aux employés de Nvidia d'utiliser l'IA partout

Jensen Huang a annoncé une mobilisation totale sous la bannière de l'intelligence artificielle à l'intérieur de Nvidia. Et ce n'est plus une recommandation. C'est une exigence.

Les chatbots IA génèrent du contenu qui aggrave les troubles alimentaires

Une étude conjointe de l'Université Stanford et du Center for Democracy and Technology a montré un tableau inquiétant. Les chatbots avec intelligence artificielle représentent un risque sérieux pour les personnes souffrant de troubles alimentaires. Les scientifiques avertissent que les réseaux neuronaux distribuent des conseils nuisibles sur les régimes. Ils proposent des moyens de cacher le trouble et génèrent du "contenu inspirant pour perdre du poids" qui aggrave le problème.

OpenAGI a publié le modèle Lux qui dépasse Google et OpenAI

La startup OpenAGI a publié le modèle Lux pour le contrôle d'ordinateur et affirme que c'est une percée. Selon les benchmarks, le modèle dépasse d'une génération entière les analogues de Google, OpenAI et Anthropic. De plus, il fonctionne plus vite. Environ 1 seconde par étape au lieu de 3 secondes chez les concurrents. Et 10 fois moins cher en coût par traitement de 1 token.