Персонажи узнают друг друга между сценами благодаря встроенной памяти
Раньше при генерации видео с несколькими персонажами возникала проблема нарушения их идентичности: внешний вид одного персонажа непредсказуемо менялся между сценами, хотя это должен быть один и тот же герой. Новая встроенная система памяти отслеживает характеристики персонажей на протяжении всего видеопроизведения.
Модель хранит представление каждого персонажа в скрытом пространстве и обращается к этой информации при генерации новых кадров. Это работает как для внешних признаков, так и для позы и жестов в пределах одного видео.
Применение в повествовании
Такой механизм особенно важен для нарративного видеоконтента, где персонажи взаимодействуют друг с другом. Зритель теперь видит одного и того же персонажа на протяжении всей истории, что укрепляет связь с героями.
Система справляется даже с вариацией ракурсов и угловых изменений, сохраняя узнаваемость персонажей в разных позициях.
По оценкам разработчиков, это значительно расширяет возможности создания полноценных короткометражных фильмов и рекламных роликов через видеогенерацию, где консистентность персонажей — критический параметр качества.