Переходы между клипами стали невидимы: улучшена склейка сцен
При синтезе длинного видео его разбивают на отдельные клипы, чтобы не исчерпать память модели. Но на стыках клипов часто появляются скачки в освещении, мерцание, изменение геометрии сцены — результат того, что каждый клип генерируется независимо.
Решение использует механизм перекрытия: последние кадры первого клипа и первые кадры второго генерируются совместно, с общим контекстом и согласованными параметрами сцены. Это обеспечивает непрерывность всех физических характеристик видео.
Техническая реализация
При генерации второго клипа модель получает не только промпт и стартовый кадр, но и полный вектор состояния сцены из первого клипа: положение света, позиция камеры, цветовой баланс, глубина резкости.
Переходы между клипами теперь остаются незамеченными даже при внимательном просмотре, что позволяет практически убрать монтаж из процесса постпродакшена.
Методология применима к видео любой длины и сложности, что открывает новые возможности для автоматической генерации длинных нарративных произведений.