6 выходцев из Google научили ChatGPT побеждать людей в тесте на AGI

Post Thumbnail

6 выходцев из Google DeepMind основали стартап Poetiq и добились 75% на бенчмарке ARC-AGI-2. Это тест на гибкий интеллект от Франсуа Шолле. Средний человек на том же тесте набирает 60%. Вот вам и очередная граница пала.

Результат получен на GPT-5.2 X-High при стоимости менее $8 за задачу. Но никакой специальной оптимизации под GPT-5.2 в Poetiq не проводили. Просто взяли существующую обвязку, применили к новой модели — и поехали.

Философия Poetiq — не париться с созданием собственных моделей, а строить мета-систему, которая дёргает чужие модели и выжимает из них максимум. Механика простая: цикл «генерация, критика, уточнение». Система не тупо отправляет запрос и ждёт ответ. Она генерирует решение, разбирает его на части, получает обратную связь и снова лезет к модели для улучшения. Ключевая фишка — самоаудит. Система сама решает, когда ответ норм, и останавливается. В среднем меньше 2 запросов на задачу.

ARC-AGI-2 — тест для измерения способности ИИ осваивать новые навыки за пределами обучающих данных. Задачи — визуальные головоломки с цветными квадратами. Когда тест вышел в марте 25, лучшие модели набирали 1-4%. А сейчас человек проиграл.

Авторы бенчмарка из ARC Prize назвали 25 «годом уточняющих циклов». Прогресс теперь обеспечивают не модели, а системы проверки и улучшения результатов поверх них. Получается, что важнее не мозги модели, а умение правильно её переспрашивать. Вот вам и AGI.

Почитать из последнего
ChatGPT за 21 день убедил нормального мужика, что он открыл формулу уничтожения интернета
Рекрутёр Алан Брукс лёг на диван в своём доме в Канаде. В 47 лет можно и отдохнуть. Включил сыну видео про число пи и вечером задал ChatGPT невинный вопрос: объясни, что это такое? Через 21 день он рассылал предупреждения по всему интернету о том, что открыл математическую формулу, способную уничтожить интернет. Параллельно разрабатывал жилет-силовой щит и левитационный луч. Он не наблюдался у психиатра. Просто человек с телефоном и чатботом.
Вайб-кодинг убивает Open Source - и это проблема для всех
Исследователи из Центрально-Европейского университета в Вене обнаружили жёсткую закономерность. Вайб-кодеры только потребляют ресурсы, но ничего не отдают обратно. Откуда нейросеть может взять знания? А берет она их из Open Source. Из тех самых бесплатных библиотек и фреймворков, которые энтузиасты создавали 10летиями.
Как уболтали ИИ-бота на скидку 80%
Владелец небольшого бизнеса в Англии поставил на сайт чат-бота на ИИ, чтобы он отвечал на вопросы клиентов по ночам. Полгода всё работало идеально — бот консультировал и помогал оформлять заказы, даже продажи росли. А потом нашёлся 1 хитрец, который за час беседы выманил у искусственного интеллекта скидку 80% на заказ в £8000.