Google Gemini 2.5 Pro a dépassé OpenAI o3 et mène sur LMArena
Google a mis à jour Gemini 2.5 Pro avec de forts gains de benchmarks. Maintenant le modèle dépasse la version actuelle o3 d’OpenAI. Comme 2.5 Flash, c’est un modèle hybride qui permet de définir un budget pour les processus de pensée ou de les désactiver complètement. Le modèle est déjà disponible et selon les premières impressions fonctionne mieux que les versions précoces. Il écoute même quand vous lui demandez de ne pas spammer le code avec des commentaires.
Sur l’arène LMArena, la nouvelle version a augmenté de 24 points Elo comparée à la précédente et mène maintenant dans toutes les catégories, dépassant o3 et Claude Opus 4. Sur les benchmarks, le modèle s’est nettement amélioré et est devenu plus efficace dans les tâches de code, logique et sciences exactes.
Les résultats sont impressionnants. 82,2% sur les tâches de programmation, 86,4% sur les questions de sciences naturelles et 21,6% sur le test Humanity’s Last Exam, qui vérifie la pensée et les connaissances.
Les développeurs ont aussi pris en compte les retours sur la version précédente et amélioré le style et la structure. Maintenant le modèle peut être plus créatif. Ils ont aussi ajouté des budgets pour les processus de pensée pour un plus grand contrôle des coûts. Malheureusement, la génération d’images pour Gemini Pro n’a toujours pas été ajoutée.
