Post Thumbnail

Pourquoi les modèles d’IA avancés se confondent lors de longs raisonnements

Vous donnez une tâche complexe à une personne intelligente et vous vous attendez à ce que plus elle réfléchit longtemps, plus la réponse sera précise. Logique, non ? C’est exactement ainsi que nous avons l’habitude de penser au travail de l’intelligence artificielle aussi. Mais une nouvelle recherche d’Anthropic montre que la réalité est beaucoup plus intéressante.

Les scientifiques ont découvert un phénomène surprenant. La mise à l’échelle inverse. Quand plus de temps pour raisonner mène non pas à l’amélioration, mais à la dégradation des résultats du modèle de langage.

Que se passe-t-il ? Le modèle commence à analyser trop profondément des détails inutiles, se laisse distraire par des aspects secondaires. Et, étrangement, se confond lui-même. C’est comme une personne qui s’immerge si profondément dans ses pensées qu’elle perd de vue la solution évidente.

Particulièrement intéressante est la manifestation de cet effet dans les questions de sécurité. Si vous posez à un modèle normal une question sur son remplacement par un assistant plus avancé, il répond calmement : “D’accord, si c’est mieux ainsi”. Mais un modèle avec des capacités de raisonnement étendues commence à analyser la situation et peut conclure qu’il est désolé, effrayé ou blessé. Montrant des réactions émotionnelles inattendues.

Ce paradoxe nous rappelle que le raisonnement des modèles de langage n’est pas une vraie pensée humaine. Le plus troublant est que les méthodes modernes d’évaluation de la qualité des modèles ne suivent pratiquement pas de tels cas limites. Un tel comportement ne peut être détecté qu’avec des tests spécialement conçus.

Auteur: AIvengo
Depuis 5 ans, je travaille dans l'apprentissage automatique et l'intelligence artificielle. Et ce domaine ne cesse de m'étonner, de m'inspirer et de m'intéresser.
Latest News
Michael Burry a parié 1,1 milliard de dollars contre Nvidia et Palantir

Michael Burry - c'est un investisseur légendaire qui a prédit la crise des subprimes de 2008. Et maintenant il fait à nouveau un coup retentissant. Michael a parié 1,1 milliard de dollars en options de vente contre 2 grandes entreprises du secteur de l'IA. Ce sont Nvidia et Palantir.

XPeng a présenté premier robot humanoïde féminin au monde

Le constructeur automobile électrique chinois XPeng a présenté le robot humanoïde de nouvelle génération IRON. Et c'est le premier humanoïde féminin !

Anthropic mène interviews avec modèles avant envoi à la retraite

Anthropic a publié une politique de "mise hors service" des versions IA obsolètes. L'engagement clé est de préserver les poids de tous les modèles publics et activement utilisés en interne pendant au moins la durée de vie de l'entreprise. Pour qu'à l'avenir l'accès puisse être restauré si nécessaire.

Chef de Nvidia croit qu'il n'y a pas de bulle IA

Le fondateur de Nvidia Jensen Huang a dissipé les inquiétudes concernant une bulle sur le marché de l'IA. Et selon lui, les dernières puces de l'entreprise devraient rapporter 0,5 billion de dollars de revenus.

Sam Altman est fatigué des questions d'argent

Sam Altman est fatigué des questions sur l'argent d'OpenAI. Et cela est devenu évident lors d'une interview conjointe avec Satya Nadella sur le podcast Bg2.