Stability AI представляет трансформацию 2D-фото в 3D-сцены

Компания Stability AI объявила о выпуске инновационной AI-модели Stable Virtual Camera, способной преобразовывать двумерные изображения в иммерсивные видеоматериалы с реалистичной глубиной и перспективой. Это технологическое достижение знаменует значительный прогресс в области генеративного искусственного интеллекта и виртуальной кинематографии.

Stable Virtual Camera представляет собой существенное развитие концепции виртуальных камер, традиционно используемых в цифровом кинопроизводстве и 3D-анимации. Интеграция генеративного AI в этот инструментарий открывает беспрецедентные возможности для контроля и кастомизации создаваемого контента.

Технические возможности новой модели впечатляют:

• Генерация «новых ракурсов» сцены на основе от одного до 32 исходных изображений.
• Создание видео с динамическими траекториями движения камеры.
• Поддержка предустановленных режимов съемки: «Spiral», «Dolly Zoom», «Move» и «Pan».
• Возможность работы с различными форматами: квадратным (1:1), портретным (9:16) и ландшафтным (16:9).
• Способность генерировать видеопоследовательности длиной до 1000 кадров.

Несмотря на впечатляющие возможности, Stability предупреждает о потенциальных ограничениях текущей исследовательской версии. Модель может демонстрировать снижение качества при работе с изображениями, содержащими людей, животных или «динамические текстуры» вроде воды. «Высокоамбициозные сцены, сложные траектории камеры, пересекающие объекты или поверхности, и объекты неправильной формы могут вызывать эффект мерцания, особенно когда целевые ракурсы значительно отличаются от исходных изображений», — отмечается в блоге компании.

Этот технологический прорыв происходит на фоне сложного периода для Stability AI. Компания, известная своей популярной моделью генерации изображений Stable Diffusion, в прошлом году привлекла новые инвестиции от таких значимых фигур, как Эрик Шмидт и основатель Napster Шон Паркер, стремящихся восстановить бизнес. Ранее сообщалось, что соучредитель и бывший CEO Stability Эмад Мостак привел компанию к финансовым проблемам, что повлекло за собой увольнение сотрудников, срыв партнерства с Canva и растущую обеспокоенность инвесторов перспективами компании.