AMD пробует заменить трассировку лучей нейросетью

Трассировка лучей радует глаз, но душит производительность. AMD предложила альтернативу: пусть ИИ дорисовывает свет сам, а не считает каждое отражение.

Метод получил длинное имя — «временно стабильное генеративное освещение с помощью одношаговой модели диффузии». Работает он на Stable Diffusion 2.1 Turbo. На вход идёт кадр с прямым светом, на выходе — сцена с полноценным глобальным освещением.

Базу для обучения собрали солидную: 31 000 синтетических интерьеров, в каждом до 30 источников света плюс движущиеся объекты. Прогон делали на ускорителях AMD Instinct MI210, и не раз, а 50.

Голой генерации не хватило. В модель закладывают данные о свете, материалах и геометрии, иначе картинка разъедется со сценой. Ещё подключили временной VAE: он связывает кадры по движению и тянет за собой прошлые результаты, чтобы картинка не мерцала.

Разработчики уверяют, что метод вытягивает мягкие тени и отражённый свет. А конкуренты, мол, грешат визуальными артефактами и «галлюцинируют» детали сцены.

Впечатляет, но до игр ещё топать и топать. На RTX 3090 кадр считается 0,29 секунды — то есть 3,45 кадра в секунду при 512 × 512 и 8–9 ГБ видеопамяти.

Да и речь лишь о глобальном освещении, не о рендеринге в целом. Пока это скорее показать направление. Но если ИИ разгонится, у разработчиков появится ещё один рычаг экономии без отказа от реалистичного света.

—

Телеграм про право в IT и AI. IT юристы — PravoWeb.com