Post Thumbnail

Gemini Robotics: neuer Ansatz zur KI-Robotersteuerung

Google stellte das Gemini Robotics-System vor, das KI-Agenten in die physische Welt bringt. Das Unternehmen entwickelte ein verbessertes Agentensystem zur Robotersteuerung. Fähig, besser zu denken und zu planen, mit Menschen zu interagieren und Tools wie Websuche zu nutzen.

Innerhalb des Systems arbeiten gleichzeitig 2 Modelle. Gemini Robotics-ER 1.5 und Gemini Robotics 1.5 erfüllen verschiedene Funktionen in der Robotersteuerung. Das erste Modell dient als hochrangiges Gehirn, analysiert Umgebung und Handlungen oder Befehle von Menschen, erstellt detaillierten Aufgabenausführungsplan und ruft bei Bedarf Tools auf.

Gemini Robotics 1.5 agiert als Ausführer, der Anweisungen in präzise Motorbefehle für den Roboter umwandelt. Zum Beispiel, bei Anfrage Müll korrekt zu sortieren basierend auf Nutzerstandort arbeitet das System stufenweise.

Gemini Robotics-ER 1.5 analysiert Anfrage, greift auf Internet zu um Müllsortierungsregeln in bestimmtem Land zu verstehen. Bewertet vorhandenen Müll und gibt Befehle wie Flasche in linken Haufen, Serviette in rechten. Das Modell gibt Trace seiner Überlegung aus, macht System interpretierbarer.

Gemini Robotics 1.5 nimmt Befehle von ER entgegen und wandelt sie in präzise Bewegungstrajektorien um. Wenn sich während des Prozesses etwas in der Umgebung ändert, bemerkt ER dies und korrigiert Anweisungen. Bei Änderung der Roboterform muss gesamtes System nicht angepasst werden, es reicht zweites Modell einzustellen.

Gemini Robotics 1.5 ist ein Vision-Language-Action-Modell, das visuelle Informationen und Anweisungen in Roboterbefehle umwandelt, vor Handlung nachdenkt und seinen Prozess erklärt. Gemini Robotics-ER 1.5 ist verantwortlich für Planung und logische Entscheidungen, kann digitale Tools aufrufen und schrittweise Pläne erstellen.

Die Modelle ermöglichen Robotern, komplexe mehrstufige Aufgaben auszuführen, von verschiedenen Gerätetypen zu lernen und transparenter und sicherer zu handeln.

Autor: AIvengo
Seit 5 Jahren arbeite ich mit maschinellem Lernen und künstlicher Intelligenz. Und dieser Bereich hört nicht auf, mich zu überraschen, zu begeistern und zu interessieren.
Latest News
UBTech wird Roboter Walker S2 für $37 Mio. an die Grenze Chinas schicken

Das chinesische Unternehmen UBTech gewann einen Vertrag über $37 Millionen. Und wird menschenähnliche Roboter Walker S2 zum Dienst an der Grenze Chinas zu Vietnam schicken. South China Morning Post berichtet, dass die Roboter mit Touristen und Personal interagieren, logistische Operationen durchführen, Fracht inspizieren und das Gelände patrouillieren werden. Und bezeichnenderweise — sie können selbstständig ihre Batterie wechseln.

Anthropic enthüllte versehentlich ein internes Dokument über die "Seele" von Claude

Anthropic enthüllte versehentlich einem Nutzer die "Seele" der künstlichen Intelligenz. Und das ist keine Metapher. Das ist ein ganz konkretes internes Dokument.

Jensen Huang befahl Nvidia-Mitarbeitern, KI überall zu nutzen

Jensen Huang verkündete innerhalb von Nvidia eine totale Mobilmachung unter dem Banner der künstlichen Intelligenz. Und das ist keine Empfehlung mehr. Das ist eine Forderung.

KI-Chatbots generieren Inhalte, die Essstörungen verschlimmern

Eine gemeinsame Studie der Stanford University und des Center for Democracy and Technology zeigte ein beunruhigendes Bild. Chatbots mit künstlicher Intelligenz stellen ein ernsthaftes Risiko für Menschen mit Essstörungen dar. Wissenschaftler warnen, dass neuronale Netze schädliche Ratschläge zu Diäten verteilen. Sie schlagen Wege vor, die Störung zu verbergen und generieren "inspirierenden Abnehm-Content", der das Problem verschlimmert.

OpenAGI veröffentlichte das Modell Lux, das Google und OpenAI überholt

Das Startup OpenAGI veröffentlichte das Modell Lux zur Computersteuerung und behauptet, dass dies ein Durchbruch ist. Nach Benchmarks überholt das Modell um eine ganze Generation Analoga von Google, OpenAI und Anthropic. Außerdem arbeitet es schneller. Etwa 1 Sekunde pro Schritt statt 3 Sekunden bei Konkurrenten. Und 10 Mal günstiger in den Kosten pro Verarbeitung von 1 Token.