Même IA se comporte différemment selon interface
L’Université de Hambourg a mené une étude qui montre un schéma étrange. Il s’avère que les recommandations de nouvelles de ChatGPT diffèrent grandement selon que l’interface web ou l’API est utilisée. L’analyse de plus de 24 mille réponses en allemand a révélé une image claire.
La version web référence activement les partenaires sous licence d’OpenAI. C’est environ 13% de tous les liens. Et les réponses via API ne contiennent presque aucune de ces sources – seulement 2%. Au lieu de cela, le modèle préfère les sites encyclopédiques comme Wikipedia et les publications locales peu connues.
Il s’avère que la même IA se comporte différemment selon la méthode d’accès. La version web promeut les partenaires d’OpenAI, et la version API les ignore presque complètement.
Et la demande de “diversité des sources” n’améliore pas toujours la qualité.
Les chercheurs suggèrent que pour ChatGPT “diversité” peut signifier seulement des différences linguistiques, et non une variabilité substantielle. C’est-à-dire que le modèle comprend la diversité comme “laissez-moi prendre des sources avec des styles d’écriture différents” plutôt que “laissez-moi vérifier les faits de différentes rédactions indépendantes”.
Il s’avère que le choix des sources ne dépend pas de la qualité de l’information, mais de l’interface par laquelle vous accédez au modèle.
L’IA qui devrait aider à naviguer dans le flux d’informations crée elle-même une confusion supplémentaire.
