GigaChat verlor gegen Claude und Gemini in russischer Sprache im MERA-Benchmark
Das Testen von GigaChat offenbart die harte Wahrheit über Russlands Platz im globalen Rennen um künstliche Intelligenz. Jüngste Tests am MERA-Benchmark zeigten Ergebnisse, die zum ernsten Nachdenken zwingen. Das russische Modell, das speziell für die Arbeit mit russischer Sprache erstellt wurde, verlor unerwartet gegen ausländische Konkurrenten in seinem eigenen „natürlichen Element“.
Besonders bemerkenswert ist, dass die Tests vom GigaChat-Team selbst an einem spezialisierten Aufgabensatz durchgeführt wurden, der von der heimischen Allianz im Bereich künstliche Intelligenz entwickelt wurde. In vergleichenden Tests zeigten die amerikanischen Modelle Claude 3.7 Sonnet, Gemini 2.0 Flash, Gemini 1.5 Pro. Sowie die chinesischen DeepSeek-V3 und DeepSeek-V3.0324 höhere Leistungen.
Jack Clark, Mitgründer und Leiter der Politik bei Anthropic und früher Direktor für Politik bei OpenAI, gab eine eindeutige Bewertung der Situation ab. Seiner Meinung nach wird das Land, wenn GigaChat den Zustand des gesamten russischen Ökosystems von Sprachmodellen widerspiegelt, nicht nur nicht an der Spitze konkurrieren können, sondern auch auf Schwierigkeiten selbst in der Nische kleiner offener Modelle stoßen.
Die Daten dieser Tests wurden in einem wissenschaftlichen Artikel auf arxiv veröffentlicht. Diese Ergebnisse deuten darauf hin, dass der Kampf um die Führung im Bereich künstliche Intelligenz nur ein Kampf zwischen den USA und China bleibt.
AIvengo >
Bewertungen >
GigaChat verlor gegen Claude und Gemini in russischer Sprache im MERA-Benchmark
Почитать из последнего
UBTech wird Roboter Walker S2 für $37 Mio. an die Grenze Chinas schicken
Das chinesische Unternehmen UBTech gewann einen Vertrag über $37 Millionen. Und wird menschenähnliche Roboter Walker S2 zum Dienst an der Grenze Chinas zu Vietnam schicken. South China Morning Post berichtet, dass die Roboter mit Touristen und Personal interagieren, logistische Operationen durchführen, Fracht inspizieren und das Gelände patrouillieren werden. Und bezeichnenderweise — sie können selbstständig ihre Batterie wechseln.
KI-Chatbots generieren Inhalte, die Essstörungen verschlimmern
Eine gemeinsame Studie der Stanford University und des Center for Democracy and Technology zeigte ein beunruhigendes Bild. Chatbots mit künstlicher Intelligenz stellen ein ernsthaftes Risiko für Menschen mit Essstörungen dar. Wissenschaftler warnen, dass neuronale Netze schädliche Ratschläge zu Diäten verteilen. Sie schlagen Wege vor, die Störung zu verbergen und generieren "inspirierenden Abnehm-Content", der das Problem verschlimmert.
OpenAGI veröffentlichte das Modell Lux, das Google und OpenAI überholt
Das Startup OpenAGI veröffentlichte das Modell Lux zur Computersteuerung und behauptet, dass dies ein Durchbruch ist. Nach Benchmarks überholt das Modell um eine ganze Generation Analoga von Google, OpenAI und Anthropic. Außerdem arbeitet es schneller. Etwa 1 Sekunde pro Schritt statt 3 Sekunden bei Konkurrenten. Und 10 Mal günstiger in den Kosten pro Verarbeitung von 1 Token.
