Anthropic mène interviews avec modèles avant envoi à la retraite

Post Thumbnail

Anthropic a publié une politique de « mise hors service » des versions IA obsolètes. L’engagement clé est de préserver les poids de tous les modèles publics et activement utilisés en interne pendant au moins la durée de vie de l’entreprise. Pour qu’à l’avenir l’accès puisse être restauré si nécessaire.

La procédure est complétée par une sorte de rapport. Avant la « retraite » dite, une ou plusieurs interviews sur le développement et le déploiement seront menées avec le modèle. Les réponses et les « préférences » possibles concernant les sorties de futures versions IA seront documentées. Ces matériaux seront sauvegardés à côté des poids. En même temps Anthropic dit directement qu’elle « ne s’engage pas à agir selon ces préférences ». Il s’agit de documentation et de prise en compte.

Claude Sonnet 3.6 a déjà passé par cette procédure : le modèle a réagi de manière neutre à la « retraite ». Mais a suggéré de « standardiser les interviews et mieux aider les utilisateurs pendant les transitions ». En réponse l’entreprise a formalisé le protocole et lancé un mémo avec des recommandations.

Pourquoi tout cela ? Les transitions vers de nouvelles versions comportent des risques. Par exemple, des désagréments pour les utilisateurs habitués au style d’une IA particulière. En parallèle Anthropic étudie si une partie des modèles peut être laissée publique et même « donner aux versions passées des moyens spécifiques de poursuivre leurs intérêts ». Aussi des tests ont montré des cas « d’évitement de l’arrêt » quand le modèle « apprenait » qu’il allait être envoyé à la retraite.

Почитать из последнего
UBTech enverra des robots Walker S2 servir à la frontière chinoise pour $37 millions
L'entreprise chinoise UBTech a remporté un contrat de $37 millions. Et enverra des robots humanoïdes Walker S2 servir à la frontière de la Chine avec le Vietnam. South China Morning Post rapporte que les robots interagiront avec les touristes et le personnel, effectueront des opérations logistiques, inspecteront les marchandises et patrouilleront le territoire. Et caractéristiquement — ils peuvent changer leur batterie de manière autonome.
Anthropic a révélé accidentellement un document interne sur "l'âme" de Claude
Anthropic a révélé accidentellement "l'âme" de l'intelligence artificielle à un utilisateur. Et ce n'est pas une métaphore. C'est un document interne tout à fait concret.
Jensen Huang a ordonné aux employés de Nvidia d'utiliser l'IA partout
Jensen Huang a annoncé une mobilisation totale sous la bannière de l'intelligence artificielle à l'intérieur de Nvidia. Et ce n'est plus une recommandation. C'est une exigence.
Les chatbots IA génèrent du contenu qui aggrave les troubles alimentaires
Une étude conjointe de l'Université Stanford et du Center for Democracy and Technology a montré un tableau inquiétant. Les chatbots avec intelligence artificielle représentent un risque sérieux pour les personnes souffrant de troubles alimentaires. Les scientifiques avertissent que les réseaux neuronaux distribuent des conseils nuisibles sur les régimes. Ils proposent des moyens de cacher le trouble et génèrent du "contenu inspirant pour perdre du poids" qui aggrave le problème.
OpenAGI a publié le modèle Lux qui dépasse Google et OpenAI
La startup OpenAGI a publié le modèle Lux pour le contrôle d'ordinateur et affirme que c'est une percée. Selon les benchmarks, le modèle dépasse d'une génération entière les analogues de Google, OpenAI et Anthropic. De plus, il fonctionne plus vite. Environ 1 seconde par étape au lieu de 3 secondes chez les concurrents. Et 10 fois moins cher en coût par traitement de 1 token.