Post Thumbnail

Les tests hors ligne ont montré de moins bons résultats des modèles IA

L’intelligence artificielle a officiellement dépassé l’humain moyen en QI. GPT-5 Pro a montré des résultats de 110 à 138 points, tandis que le QI humain moyen est de 100 points. Mais comprenons ce que cela signifie vraiment.

Le portail Tracking AI a mené des tests à grande échelle de modèles IA. Au sommet se trouvaient 2 versions de GPT-5 Pro. Avec vision par ordinateur activée et désactivée. Derrière eux suivent Gemini 2.5 Pro, Claude Opus 4 et Grok 4.

Mais il y a une nuance importante. Contrairement aux humains, l’intelligence artificielle n’est pas limitée dans le temps et peut faire jusqu’à 10 tentatives pour résoudre chaque tâche. Ceci a été fait pour contourner les systèmes de sécurité qui bloquent parfois des mots comme examen ou formation.

Pour les tests, ils ont utilisé 2 types de tâches. Premier — le test officiel Mensa Norway, 35 tâches en 25 minutes. Deuxième — un test hors ligne spécial, créé de zéro et absent d’internet. Cela a exclu la possibilité de pré-entraînement des modèles sur ces tâches.

Ils ont testé les modèles avec vision par ordinateur activée et désactivée. Dans le deuxième cas, les tâches étaient décrites complètement en texte. Et vous savez quoi ? Presque tous les modèles ont montré de moins bons résultats sur le test hors ligne. Cela prouve — des benchmarks de qualité pour l’intelligence artificielle doivent être créés de zéro et protégés contre les fuites vers internet.

L’intelligence artificielle a formellement dépassé l’humain dans les tests d’intelligence classiques. Mais la comparaison est incorrecte. Les tests de QI mesurent un type spécifique de reconnaissance de motifs dans lequel l’intelligence artificielle est naturellement forte. Plus 10 tentatives sans limites de temps – ce sont des conditions de test complètement différentes. Il semble que ces “chercheurs” créent délibérément des conditions pour faire paraître l’intelligence artificielle plus intelligente.

Auteur: AIvengo
Depuis 5 ans, je travaille dans l'apprentissage automatique et l'intelligence artificielle. Et ce domaine ne cesse de m'étonner, de m'inspirer et de m'intéresser.
Latest News
Chef de Nvidia croit qu'il n'y a pas de bulle IA

Le fondateur de Nvidia Jensen Huang a dissipé les inquiétudes concernant une bulle sur le marché de l'IA. Et selon lui, les dernières puces de l'entreprise devraient rapporter 0,5 billion de dollars de revenus.

Sam Altman est fatigué des questions d'argent

Sam Altman est fatigué des questions sur l'argent d'OpenAI. Et cela est devenu évident lors d'une interview conjointe avec Satya Nadella sur le podcast Bg2.

Nombre de postes d'ingénieurs de déploiement avancé a augmenté de 800%

Les entreprises d'IA ont inventé une nouvelle profession. Il s'agit d'ingénieurs de déploiement avancé.

OpenAI promet de créer scientifique IA complet d'ici 2028

OpenAI a promis de créer un scientifique basé sur l'IA complet d'ici 2028. Le PDG de l'entreprise Sam Altman a également déclaré que les systèmes d'apprentissage profond pourront effectuer les fonctions de scientifiques chercheurs au niveau stagiaire d'ici septembre de l'année prochaine. Et le niveau d'un chercheur IA autonome complet pourrait être atteint d'ici 2028.

Emplois pour jeunes spécialistes IT en Grande-Bretagne se sont effondrés de 46%

Vous savez ce qui se passe sur le marché du travail pour les jeunes spécialistes IT en Grande-Bretagne ? Au cours de la dernière année, le nombre d'emplois pour jeunes spécialistes s'est effondré de 46%. Et une baisse supplémentaire de 53% est prévue, rapporte The Register. Citant les statistiques de l'Institute of Student Employers.