GigaChat a perdu contre Claude et Gemini en langue russe sur le benchmark MERA
Le test de GigaChat révèle la dure vérité sur la place de la Russie dans la course mondiale à l’intelligence artificielle. Des tests récents sur le benchmark MERA ont montré des résultats qui forcent à une réflexion sérieuse. Le modèle russe, créé spécifiquement pour travailler avec la langue russe, a perdu de manière inattendue contre des concurrents étrangers dans son propre « élément naturel ».
Particulièrement remarquable est que les tests ont été menés par l’équipe GigaChat elle-même sur un ensemble de tâches spécialisé développé par l’Alliance domestique dans le domaine de l’intelligence artificielle. Dans les tests comparatifs, les modèles américains Claude 3.7 Sonnet, Gemini 2.0 Flash, Gemini 1.5 Pro. Ainsi que les chinois DeepSeek-V3 et DeepSeek-V3.0324 ont démontré des performances plus élevées.
Jack Clark, cofondateur et chef de politique chez Anthropic, et anciennement directeur de politique chez OpenAI, a donné une évaluation sans ambiguïté de la situation. Selon son opinion, si GigaChat reflète l’état de tout l’écosystème russe des modèles de langage, alors le pays ne pourra non seulement pas concourir à la pointe, mais fera aussi face à des difficultés même dans la niche des petits modèles ouverts.
Les données de ce test ont été publiées dans un article scientifique sur arxiv. Ces résultats indiquent que la lutte pour le leadership dans l’intelligence artificielle reste une bataille seulement entre les États-Unis et la Chine.
AIvengo >
Avis >
GigaChat a perdu contre Claude et Gemini en langue russe sur le benchmark MERA
Почитать из последнего
UBTech enverra des robots Walker S2 servir à la frontière chinoise pour $37 millions
L'entreprise chinoise UBTech a remporté un contrat de $37 millions. Et enverra des robots humanoïdes Walker S2 servir à la frontière de la Chine avec le Vietnam. South China Morning Post rapporte que les robots interagiront avec les touristes et le personnel, effectueront des opérations logistiques, inspecteront les marchandises et patrouilleront le territoire. Et caractéristiquement — ils peuvent changer leur batterie de manière autonome.
Les chatbots IA génèrent du contenu qui aggrave les troubles alimentaires
Une étude conjointe de l'Université Stanford et du Center for Democracy and Technology a montré un tableau inquiétant. Les chatbots avec intelligence artificielle représentent un risque sérieux pour les personnes souffrant de troubles alimentaires. Les scientifiques avertissent que les réseaux neuronaux distribuent des conseils nuisibles sur les régimes. Ils proposent des moyens de cacher le trouble et génèrent du "contenu inspirant pour perdre du poids" qui aggrave le problème.
OpenAGI a publié le modèle Lux qui dépasse Google et OpenAI
La startup OpenAGI a publié le modèle Lux pour le contrôle d'ordinateur et affirme que c'est une percée. Selon les benchmarks, le modèle dépasse d'une génération entière les analogues de Google, OpenAI et Anthropic. De plus, il fonctionne plus vite. Environ 1 seconde par étape au lieu de 3 secondes chez les concurrents. Et 10 fois moins cher en coût par traitement de 1 token.
