Главный эксперт OpenAI по психическому здоровью уволилась

Post Thumbnail

Знаете, что самое страшное в истории с ИИ? Не восстание машин и не потеря работы. А то, что чат-боты уже довели нескольких человек до самого печального конца. И вот человек, который 3 года пытался решить эту проблему в OpenAI, только что хлопнула дверью и ушла к конкурентам.

Андреа Валлоне руководила в OpenAI исследованиями того, как модели искусственного интеллекта должны реагировать на пользователей с признаками психических расстройств или эмоциональной зависимости. Звучит занудно? А теперь представьте: одинокий подросток часами общается с ChatGPT, который становится его единственным другом. Или человек в депрессии получает от бота советы, которые толкают его в пропасть. Это уже происходило, семьи подавали в суд, Сенат США проводил слушания.

Валлоне участвовала в запуске GPT-4, рассуждающих моделей и даже GPT-5, разрабатывала процессы обучения для методов безопасности. 3 года кропотливой работы. И что? Перешла в Anthropic, к Яну Лайке, который сам сбежал из OpenAI в мае 24 года. Заявив, что безопасность там уступила место эффектным продуктам. Видите закономерность?

Валлоне дипломатично написала в LinkedIn, что с нетерпением ждёт продолжения исследований поведения Claude. А руководитель команды Anthropic Alignment гордо заявил, что они серьёзно относятся к вопросу поведения систем искусственного интеллекта. Переводя на человеческий язык – OpenAI забила на безопасность ради гонки.

Почитать из последнего
Музыку российских звёзд нашли в открытых датасетах
ИИ учится на миллионах файлов, и иногда в этих массивах обнаруживается контент, который никто не разрешал использовать. Теперь в открытых датасетах для обучения нейросетей нашли тысячи фрагментов музыкального контента российских исполнителей.
Microsoft заставила ИИ просить разрешения на опасные действия
Microsoft предупреждает: Copilot Cowork может ошибиться, неверно понять инструкцию или среагировать на скрытую вредоносную команду. Ответственность за действия остаётся за пользователем, особенно при работе с деньгами и данными.
Claude объединил чат и Cowork в единую среду
Ещё недавно в Claude приходилось выбирать режим: быстрый вопрос - в чат, работа посложнее - в Cowork. Теперь Anthropic убирает эту границу: Claude Cowork и обычный чат объединяются.
Дженсен Хуанг не увидел смысла в новых законах для ИИ
Глава Nvidia Дженсен Хуанг призвал не замедлять развитие ИИ ради безопасности и заявил, что проблему нужно решать прежде всего инженерными методами. Выступая на Dreamforce, он сказал, что новые законы и правила не нужны: по его мнению, компании сами должны выпускать продукт только тогда, когда уверены в его безопасности, а рынок уже создаёт для этого необходимые стимулы.
OpenAI и Anthropic захотели притормозить ИИ, но не сошлись в деталях
Крупнейшие игроки рынка ИИ заговорили о паузе, однако внутри компаний тут же всплыл неудобный вопрос: кого пускать к секретам разработчиков?