Конец промптам: теперь ИИ-видео просто разыгрывают перед камерой
Simulon выпустил на iPhone рендер, который смотрит, что вы делаете и говорите в кадре, и заставляет виртуальных персонажей на это реагировать.
Стартап Simulon выпустил на iPhone функцию Reality-Aware Rendering, и она переворачивает привычную схему работы с ИИ-видео. Никаких текстовых запросов. Вы через камеру телефона ставите в комнату или во двор виртуального персонажа или предмет, включаете запись и просто играете сцену: двигаетесь, жестикулируете, говорите.
Когда запись остановлена, нейросеть разбирает дубль целиком: что вы делали, что говорили и что вокруг. Персонажи реагируют на всё это, а финальный ролик генерируется заново на основе записи. По словам сооснователя Simulon Дивеша Найду, это новое исполнение сцены, а не копия отснятого материала. Исходник тут работает как актёрская проба и инструкция одновременно.
Команда показала демо-короткометражку и уверяет, что сняла её за один день и без единого промпта: только реальные кадры, 3D-ассеты и новый рендер. В конце ролика видно, что на самом деле было в кадре.
Есть оговорки. Это пока не реальное время: картинка считается после съёмки. На вопрос, будет ли работать вживую, Найду ответил «вот куда мы движемся». Функция уже доступна на iPhone, версию для Android обещают позже.
Промпт-инженеры, кажется, нервно закурили. Теперь сцену надо не описывать, а сыграть.