Безопасность в жертву прибыли: Кремниевая долина сокращает исследования ИИ

Post Thumbnail

Компании Кремниевой долины всё активнее жертвуют исследованиями искусственного интеллекта ради прибыли. И разработка продуктов вытесняет работу о безопасности систем. По словам Уайта, чья компания CalypsoAI проводит аудиты популярных моделей от Meta, Google и OpenAI, современные системы с меньшей вероятностью отклонят вредоносные запросы. И они могут раскрыть способы создания взрывных устройств или конфиденциальную информацию для злоумышленников.

«Модели становятся лучше, но они также с большей вероятностью будут хороши в плохих вещах, – говорит Уайт. – Их становится проще обмануть, чтобы делать что-то вредоносное».

Изменения особенно заметны в компаниях Meta и Alphabet, которые снизили приоритет исследовательских лабораторий. В родительской компании Facebook подразделение фундаментальных исследований в области искусственного интеллекта отошло на второй план. Уступив место Meta GenAI.

В Alphabet исследовательская группа Google Brain теперь является частью DeepMind. Подразделения, отвечающего за разработку продуктов искусственного интеллекта. Эта реорганизация отражает смещение фокуса с фундаментальных исследований на прикладные разработки.

Журналисты CNBC побеседовали с более чем 12 профессионалами в области искусственного интеллекта, которые единогласно говорят о сдвиге от исследований к приносящим доход продуктам. Сотрудники сталкиваются с всё более жёсткими сроками разработки. Они не могут позволить себе отстать в гонке за вывод новых моделей на рынок. И тщательное тестирование становится роскошью, которую компании считают возможным сократить.

Думаю, что в ближайшие пару лет мы увидим рост инцидентов с безопасностью. Что приведёт к регуляторному вмешательству государств. Или всё это закончится прямой цензурой.

Почитать из последнего
Более 30 000 врачей и юристов обучают нейросети делать их работу
Представьте картину: журналист с 20-летним стажем, которого выкинули в прошлом году, сидит и правит статьи, которые создал ИИ. 20-30 часов в неделю. За деньги. Чтобы машина научилась писать ещё лучше. Абсурд? Добро пожаловать в новую реальность белых воротничков.
Из-за ИИ теоретическая физика исчезнет через 10 лет
Физик-теоретик и популяризатор науки Сабина Хоссенфельдер, выдала интересный прогноз. Она считает, что через 3 года научные исследования в привычном виде перестанут существовать. А через 10 лет теоретическая физика как область человеческой деятельности может практически закончиться. Для решения задач будет достаточно просто купить вычислительное время нейросети. Звучит как антиутопия? Только вот процесс уже пошёл.
Nvidia и Siemens превратят завод в гигантского робота с ИИ
Глава Nvidia Дженсен Хуанг на выставке CES выдал очень интересную фразу, цитирую: "Эти производственные предприятия, по сути, станут гигантскими роботами". Так Nvidia и Siemens анонсировали создание Industrial AI Operating System. Платформы, которая внедрит ИИ во всю цепочку промышленного производства. От проектирования до логистики. Завод будущего не просто автоматизирован — он думает сам.
Крёстный отец SaaS уволил продажников и заменил их ИИ за полгода
Джейсон Лемкин, которого называют крёстным отцом SaaS и основателем сообщества SaaStr, публично заявил что больше не будет нанимать людей в отдел продаж своей компании. Вместо живых менеджеров теперь работают агенты на основе ИИ. По его словам, переход занял меньше года.
Создатель Signal запустил ИИ-ассистента с полной анонимностью
Создатель мессенджера Signal Мокси Марлинспайк, решил сделать с чат-ботами то же что сделал с мессенджерами. Добавить слой анонимности который не пробьёшь. Его новый проект Confer с открытым исходным кодом гарантирует что данные пользователей будут недоступны вообще никому. Ни оператору платформы, ни хакерам, ни правоохранителям, ни любой другой стороне кроме самих владельцев.