Данные до 2022 года стали «доядерной сталью» для обучения ИИ
Искусственный интеллект, призванный стать локомотивом технологического прогресса, начинает тормозить собственное развитие. По данным издания The Register, генеративные модели заполнили интернет таким количеством синтетического контента, что это создаёт настоящий технологический тупик.
И мы наблюдаем формирование «цифрового замкнутого круга». Новые модели искусственного интеллекта всё чаще обучаются на материалах, созданных предыдущими версиями искусственного интеллекта. Результат напоминает классическую игру в «испорченный телефон». Где каждый последующий участник передаёт всё более искажённую информацию. В профессиональных кругах этот сценарий получил название «коллапс модели».
Возникает поразительная аналогия с доядерной сталью! Точно так же, как металл, произведённый до первых ядерных испытаний в июле 1945 года, ценится за отсутствие радионуклидов, так и данные до 2022 года становятся бесценным ресурсом из-за минимального «загрязнения» синтетическим контентом.
Морис Чиодо, научный сотрудник Центра изучения экзистенциального риска при Кембриджском университете, подчёркивает: доступ к «чистым данным» критически важен для предотвращения деградации моделей.
Почитать из последнего
Nvidia держится на долгах и схемах, как перед кризисом 2008 года
The Verge опубликовал большое расследование о финансовой кухне Nvidia. Схема работает элегантно, как карточный домик. Nvidia инвестирует в так называемые неоклауды вроде CoreWeave, которые строят дата-центры для ИИ. Те берут кредиты под залог чипов Nvidia, чтобы купить ещё больше чипов Nvidia. $1 инвестиций превращается в $5 покупок. Красиво для отчётности, но держится на соплях.
OpenAI признала, что ИИ-браузеры никогда не будут безопасны
OpenAI запустила браузер ChatGPT Atlas в октябре — и сразу получила пощёчину от реальности. Исследователи безопасности моментально показали, что несколько слов в Google Docs могут изменить поведение браузера с ИИ. И теперь компания OpenAI признаёт, что prompt injection атаки, которые манипулируют агентами через скрытые инструкции на веб-страницах или в письмах, никуда не денутся.
Нейросети загрязняют планету в тысячи раз меньше чем люди
Вот вам парадокс, который разорвёт мозг всем борцам за экологию и против ИИ одновременно. Пока все пишут про то, как нейросети жрут электричество и убивают планету, учёные взяли и посчитали реальные цифры. И знаете что? Оказалось, что искусственный интеллект оставляет углеродный след в сотни и тысячи раз меньше, чем живые писатели и художники.