Компания Stability AI представила новую модель Stable Virtual Camera, способную преобразовывать двумерные изображения в “иммерсивные” видео с реалистичной глубиной и перспективой. Модель способна создавать “новые ракурсы” сцены из одного или нескольких изображений (до 32 в общей сложности) под заданными пользователем углами камеры.
Система может генерировать видео, перемещающиеся по “динамическим” траекториям камеры или использующие предустановленные шаблоны, включая “Спираль”, “Зум Долли”, “Движение” и “Панорамирование”. Текущая исследовательская версия Stable Virtual Camera может создавать видео в форматах квадрат (1:1), портрет (9:16) и ландшафт (16:9) длиной до 1000 кадров.
Однако компания предупреждает, что модель может выдавать результаты более низкого качества в определенных сценариях, особенно при работе с изображениями, содержащими людей, животных или “динамические текстуры”, такие как вода.
Виртуальные камеры, традиционно используемые в цифровом кинопроизводстве и 3D-анимации для захвата и навигации по сценам в реальном времени, получили новое развитие. По заявлению компании, Stable Virtual Camera добавляет к этим инструментам возможности генеративного ИИ для обеспечения большего контроля и кастомизации.
“Сильно неоднозначные сцены, сложные траектории камеры, пересекающие объекты или поверхности, и объекты неправильной формы могут вызывать мерцающие артефакты”, – отмечает Stability в своем блоге, “особенно когда целевые ракурсы значительно отличаются от исходных изображений”.
