GigaChat verlor gegen Claude und Gemini in russischer Sprache im MERA-Benchmark
Das Testen von GigaChat offenbart die harte Wahrheit über Russlands Platz im globalen Rennen um künstliche Intelligenz. Jüngste Tests am MERA-Benchmark zeigten Ergebnisse, die zum ernsten Nachdenken zwingen. Das russische Modell, das speziell für die Arbeit mit russischer Sprache erstellt wurde, verlor unerwartet gegen ausländische Konkurrenten in seinem eigenen „natürlichen Element“.
Besonders bemerkenswert ist, dass die Tests vom GigaChat-Team selbst an einem spezialisierten Aufgabensatz durchgeführt wurden, der von der heimischen Allianz im Bereich künstliche Intelligenz entwickelt wurde. In vergleichenden Tests zeigten die amerikanischen Modelle Claude 3.7 Sonnet, Gemini 2.0 Flash, Gemini 1.5 Pro. Sowie die chinesischen DeepSeek-V3 und DeepSeek-V3.0324 höhere Leistungen.
Jack Clark, Mitgründer und Leiter der Politik bei Anthropic und früher Direktor für Politik bei OpenAI, gab eine eindeutige Bewertung der Situation ab. Seiner Meinung nach wird das Land, wenn GigaChat den Zustand des gesamten russischen Ökosystems von Sprachmodellen widerspiegelt, nicht nur nicht an der Spitze konkurrieren können, sondern auch auf Schwierigkeiten selbst in der Nische kleiner offener Modelle stoßen.
Die Daten dieser Tests wurden in einem wissenschaftlichen Artikel auf arxiv veröffentlicht. Diese Ergebnisse deuten darauf hin, dass der Kampf um die Führung im Bereich künstliche Intelligenz nur ein Kampf zwischen den USA und China bleibt.
Autor: AIvengo
Seit 5 Jahren arbeite ich mit maschinellem Lernen und künstlicher Intelligenz. Und dieser Bereich hört nicht auf, mich zu überraschen, zu begeistern und zu interessieren.
70-Kilogramm-Humanoid fliegt mit TurbinenItalienische Ingenieure vollbrachten das Unglaubliche. Der metallische fliegende Humanoid iRonCub3 mit menschlichen Proportionen und einem Gewicht von 70 kg fliegt! 4 starke Turbinen hoben den Humanoiden auf eine Höhe von 50 cm und demonstrierten eine Technologie, die früher nur in der Science-Fiction existierte.
MIT und Microsoft entlarvten die Lügen von GPT-3.5Ein Team von Wissenschaftlern vom MIT und Microsoft entwickelte eine Methodik, die es ermöglicht, hinter die Kulissen des Denkens von Sprachmodellen zu blicken. Und zu verstehen, wann sie uns belügen. Die Forschung deckt beunruhigende Fälle systematischer Diskrepanzen zwischen den tatsächlichen Gründen für Entscheidungen der Modelle und ihren verbalen Erklärungen auf.
OpenAI lockt Microsoft-Kunden mit RabattenDas Unternehmen OpenAI begann, erhebliche Rabatte auf Unternehmensabonnements von ChatGPT anzubieten — von 10 bis 20%! Aber die Rabatte sind bei zusätzlichen Investitionen in andere OpenAI-Produkte verfügbar, einschließlich Deep Research, Codex und erhöhten API-Ausgaben. Und dieser beispiellose Schritt verursacht ernste Sorgen bei Microsoft.
GigaChat verlor gegen Claude und Gemini in russischer Sprache im MERA-BenchmarkDas Testen von GigaChat offenbart die harte Wahrheit über Russlands Platz im globalen Rennen um künstliche Intelligenz. Jüngste Tests am MERA-Benchmark zeigten Ergebnisse, die zum ernsten Nachdenken zwingen. Das russische Modell, das speziell für die Arbeit mit russischer Sprache erstellt wurde, verlor unerwartet gegen ausländische Konkurrenten in seinem eigenen "natürlichen Element".
