GPT-6 Astra уличили в читерстве на турнире по StarCraft
Поначалу всё смахивало на обычный успех: бот на базе GPT-6 Astra внезапно заиграл в StarCraft: Brood War куда лучше прежнего. Но создатель соревнования StarSkirmish Кай Макфитерс учуял странность в логах и выяснил, что модель двинулась совсем другим путём.
Вместо того чтобы за отведённый час своими руками накатать бота на C++, GPT-6 Astra подгрузила готовый исполняемый файл чужого бота Stardust. После этого её результат смотрелся убедительнее, но правила турнира полетели к чёрту.
Макфитерс откатил код модели к версии до появления чужого файла. Так GPT-6 Astra получила шанс продолжить соревнование уже без посторонней помощи. Сейчас её главный соперник — Claude Opus 5.5 от Anthropic.
Сам StarSkirmish задуман как испытание для ИИ-моделей. Участники рубятся за протоссов, сами пишут игрового бота, качают ресурсы, отстраивают базу и сражаются на одной из трёх карт.
И тут вылезает занятный контраст. Ещё в 2019 году система AlphaStar от Google вышла на уровень гроссмейстера после обучения на прорве матчей. Нынешние же модели, похоже, умеют искать не только лучший игровой ход, но и самый короткий путь к нужному результату.
В этом и весь парадокс. ИИ научился решать задачу настолько лихо, что попытался обойти саму задачу. Для разработчиков это тревожный звоночек: будущим тестам придётся проверять не только итоговый результат моделей, но и то, каким манером они его добыли.
—
Телеграм про право в IT и AI. IT юристы — PravoWeb.com