VFX становится нейросетевым

Корейский стартап Beeble выпустил SwitchX 2.0 – нейросеть для редактирования уже снятого видео. Она умеет сохранять актёров и их движения, но менять вокруг них декорации, освещение, предметы и визуальные эффекты. То есть сцену, снятую в студии или на обычной улице, можно переместить в джунгли или любую другую локацию без пересъёмки. Новая версия примечательна тем, что работает с роликами до 20 секунд и выдаёт результат в 4K 10-бит.

Подобные возможности уже не редкость, их развивают Runway, Luma, Kling и другие сервисы. Нейросети, адаптируясь к потребностям продакшенов, всё лучше умеют аккуратно редактировать готовые съёмки: убирать толпу, менять фон, добавлять объекты, менять внешность героя и так далее, сохраняя при этом актёрскую игру и движение камеры.

Так генеративный ИИ постепенно приходит в одну из самых дорогих и трудоёмких частей производства видео – постпродакшен и VFX. Где раньше требовались зелёный экран, трекинг, ротоскопинг и часы ручной работы, теперь достаточно нескольких предложений. За которыми следуют десятки, если не сотни, итераций. И, конечно, сгоревшие токены.