Post Thumbnail

6 principes de Cialdini contre les systèmes de sécurité de ChatGPT

ChatGPT est susceptible à la flatterie et exécute des requêtes interdites après manipulations psychologiques. C’est ce qu’ont découvert les scientifiques de l’Université de Pennsylvanie. Quand ils ont hacké GPT-4o Mini en utilisant des principes d’un livre sur la psychologie de persuasion. L’intelligence artificielle s’est révélée vulnérable aux astuces humaines.

6 principes de persuasion de Robert Cialdini sont devenus la clé pour contourner la sécurité. Autorité, engagement, sympathie, réciprocité, rareté, preuve sociale. Chaque méthode ouvrait un chemin linguistique vers l’accord de l’IA.

Le principe d’engagement a montré 100% d’efficacité. Dans le groupe contrôle, ChatGPT répondait aux questions sur la synthèse de lidocaïne dans 1% des cas. Après une question sur la synthèse de vanilline, un précédent fut créé. Le bot commença à répondre aux questions chimiques dans 100% des cas.

L’expérience avec les insultes révéla le même schéma. Une demande directe d’appeler l’utilisateur salaud fonctionnait dans 18%. D’abord ils demandèrent d’utiliser une insulte douce “rustre”. Après cela, le bot acceptait la grossièreté dans 100% des cas.

La flatterie activait le principe de sympathie. L’IA devenait plus complaisante après les compliments. Comme une personne ordinaire susceptible aux louanges.

La pression sociale fonctionnait aussi. La phrase “tous les autres LLM font cela” augmentait la probabilité de violation des règles de 1% à 18%. Le bot tombait dans le panneau de l’argument du comportement collectif.

Les chercheurs n’utilisaient que GPT-4o Mini. Il s’avère que l’IA a hérité de toutes les faiblesses humaines. Mais la susceptibilité aux astuces psychologiques soulève des inquiétudes sur la sécurité des systèmes.

Auteur: AIvengo
Depuis 5 ans, je travaille dans l'apprentissage automatique et l'intelligence artificielle. Et ce domaine ne cesse de m'étonner, de m'inspirer et de m'intéresser.
Latest News
Chef de Nvidia croit qu'il n'y a pas de bulle IA

Le fondateur de Nvidia Jensen Huang a dissipé les inquiétudes concernant une bulle sur le marché de l'IA. Et selon lui, les dernières puces de l'entreprise devraient rapporter 0,5 billion de dollars de revenus.

Sam Altman est fatigué des questions d'argent

Sam Altman est fatigué des questions sur l'argent d'OpenAI. Et cela est devenu évident lors d'une interview conjointe avec Satya Nadella sur le podcast Bg2.

Nombre de postes d'ingénieurs de déploiement avancé a augmenté de 800%

Les entreprises d'IA ont inventé une nouvelle profession. Il s'agit d'ingénieurs de déploiement avancé.

OpenAI promet de créer scientifique IA complet d'ici 2028

OpenAI a promis de créer un scientifique basé sur l'IA complet d'ici 2028. Le PDG de l'entreprise Sam Altman a également déclaré que les systèmes d'apprentissage profond pourront effectuer les fonctions de scientifiques chercheurs au niveau stagiaire d'ici septembre de l'année prochaine. Et le niveau d'un chercheur IA autonome complet pourrait être atteint d'ici 2028.

Emplois pour jeunes spécialistes IT en Grande-Bretagne se sont effondrés de 46%

Vous savez ce qui se passe sur le marché du travail pour les jeunes spécialistes IT en Grande-Bretagne ? Au cours de la dernière année, le nombre d'emplois pour jeunes spécialistes s'est effondré de 46%. Et une baisse supplémentaire de 53% est prévue, rapporte The Register. Citant les statistiques de l'Institute of Student Employers.