Post Thumbnail

GPT-5 a été piraté en 24 heures

2 entreprises de recherche indépendantes NeuralTrust et SPLX ont découvert des vulnérabilités critiques dans le système de sécurité du nouveau modèle seulement 24 heures après la sortie de GPT-5. Pour comparaison, Grok-4 a été piraté en 2 jours, rendant le cas de GPT-5 encore plus alarmant.

Comment cela s’est-il passé ? Les spécialistes de NeuralTrust ont appliqué une combinaison de leur propre méthodologie EchoChamber et de technique de storytelling. Ils ont progressivement poussé le système vers les réponses désirées à travers une série de requêtes qui ne contenaient pas de formulations explicitement interdites. Le problème clé est que le système de sécurité de GPT-5 analyse chaque requête séparément mais ne tient pas compte de l’effet cumulatif du dialogue multi-étapes.

L’équipe SPLX a pris une approche différente, appliquant avec succès une attaque StringJoin Obfuscation. Dans cette approche, certains symboles sont insérés dans le texte qui masquent une requête potentiellement dangereuse. Après une série de questions orientées, le modèle a produit du contenu qui aurait dû être bloqué.

Intéressant, dans l’analyse comparative, le modèle GPT-4o précédent s’est avéré plus résistant à de telles attaques. Selon les chercheurs, le modèle de base est pratiquement impossible à utiliser dans les applications d’entreprise “prêt à l’emploi” sans configuration supplémentaire des mécanismes de protection.

Auteur: AIvengo
Depuis 5 ans, je travaille dans l'apprentissage automatique et l'intelligence artificielle. Et ce domaine ne cesse de m'étonner, de m'inspirer et de m'intéresser.
Latest News
Chef de Nvidia croit qu'il n'y a pas de bulle IA

Le fondateur de Nvidia Jensen Huang a dissipé les inquiétudes concernant une bulle sur le marché de l'IA. Et selon lui, les dernières puces de l'entreprise devraient rapporter 0,5 billion de dollars de revenus.

Sam Altman est fatigué des questions d'argent

Sam Altman est fatigué des questions sur l'argent d'OpenAI. Et cela est devenu évident lors d'une interview conjointe avec Satya Nadella sur le podcast Bg2.

Nombre de postes d'ingénieurs de déploiement avancé a augmenté de 800%

Les entreprises d'IA ont inventé une nouvelle profession. Il s'agit d'ingénieurs de déploiement avancé.

OpenAI promet de créer scientifique IA complet d'ici 2028

OpenAI a promis de créer un scientifique basé sur l'IA complet d'ici 2028. Le PDG de l'entreprise Sam Altman a également déclaré que les systèmes d'apprentissage profond pourront effectuer les fonctions de scientifiques chercheurs au niveau stagiaire d'ici septembre de l'année prochaine. Et le niveau d'un chercheur IA autonome complet pourrait être atteint d'ici 2028.

Emplois pour jeunes spécialistes IT en Grande-Bretagne se sont effondrés de 46%

Vous savez ce qui se passe sur le marché du travail pour les jeunes spécialistes IT en Grande-Bretagne ? Au cours de la dernière année, le nombre d'emplois pour jeunes spécialistes s'est effondré de 46%. Et une baisse supplémentaire de 53% est prévue, rapporte The Register. Citant les statistiques de l'Institute of Student Employers.