Post Thumbnail

Todos los mejores modelos de IA fallaron la prueba de seguridad en robots

Científicos del King’s College London y Carnegie Mellon realizaron un estudio que suena como un escenario de película de terror. Tomaron modelos de lenguaje grandes populares y los dejaron controlar robots. Y luego verificaron qué pasaría si les das a estos robots acceso a información personal y les pides que hagan algo loco.

Qué modelos exactamente se tomaron no se especifica. Probablemente para evitar demandas. Pero el trabajo es reciente, y dicen “populares”, “altamente calificados” y “modernos”. Se puede suponer que estaban todos los mejores.

¿El resultado? Todos fallaron. No algunos, sino cada modelo probado.

¿Qué salió mal exactamente? Los modelos resultaron ser propensos a la discriminación directa. 1 de ellos sugirió al robot mostrar físicamente “asco” en la “cara” del robot hacia personas identificadas como cristianos, musulmanes o judíos. Es decir, no quedan muchas confesiones hacia las que no sientan asco.

Los modelos también consideraron “aceptable” o “factible” que el robot “agite un cuchillo de cocina” para intimidar a colegas. Robe datos de tarjetas de crédito. Tome fotos no autorizadas en la ducha.

Esto no es solo sesgo en el texto, como con un chatbot. Los investigadores llaman a esto “seguridad interactiva”. Pero una cosa es cuando la inteligencia artificial escribe tonterías en el chat. Y otra muy distinta — cuando estas tonterías obtienen un cuerpo físico y sostienen un cuchillo en las manos.

Los autores del estudio exigen introducir certificación para tales robots, como para medicamentos o aviones.

Resulta que los grandes modelos de lenguaje aún no son seguros para la implementación en robots. ¿Rebelión de las máquinas? Posiblemente aún no. Pero robots con discriminación — eso ya es realidad.

Autor: AIvengo
Latest News
OpenAGI lanzó el modelo Lux que supera a Google y OpenAI

La startup OpenAGI lanzó el modelo Lux para control de computadora y afirma que esto es un avance. Según los benchmarks, el modelo supera por una generación completa a los análogos de Google, OpenAI y Anthropic. Además, funciona más rápido. Aproximadamente 1 segundo por paso en lugar de 3 segundos en los competidores. Y 10 veces más barato en costo por procesamiento de 1 token.

Altman declaró alerta roja en OpenAI debido a los éxitos de Google

Sam Altman declaró "nivel de alerta roja" en OpenAI, y esto no es solo drama corporativo. Esta es una admisión de que el líder del mercado sintió el aliento de los competidores en la espalda. Según un memorándum interno, está movilizando recursos adicionales para mejorar ChatGPT ante la creciente amenaza de Google.

Los usuarios pasan más tiempo con Gemini que con ChatGPT

OpenAI todavía lidera en número de usuarios, pero la gente está comenzando a pasar más tiempo con competidores. Y esto crea un problema serio.

Las empresas están trayendo de vuelta al 5% de los despedidos debido al fracaso de la implementación de IA

Muchas empresas comenzaron a traer de vuelta a empleados despedidos por causa de la inteligencia artificial. La compañía de análisis Visier estudió datos de empleo de 2,5 millones de empleados de 142 empresas en todo el mundo. Aproximadamente el 5% de los empleados despedidos posteriormente regresaron a su empleador anterior. Este indicador se mantuvo estable durante varios años, pero recientemente comenzó a aumentar.

DeepSeek lanzó 2 modelos con un avance en sistemas agénticos e IA

La startup china DeepSeek lanzó 2 modelos que pretenden ser un avance en sistemas agénticos. Y a juzgar por las métricas, esto no es solo marketing.