Видео без мерцания: как решили проблему артефактов в текстурах
Проблема мерцания текстур в синтезированном видео возникала из-за несогласованности деталей между соседними кадрами. Каждый кадр генерировался относительно независимо, что приводило к дрожанию поверхностей и нестабильности визуального восприятия.
Нейросети стали учитывать информацию из предыдущих кадров при обработке текущего. Архитектура модели теперь отслеживает пространственные связи и обеспечивает плавный переход деталей текстуры между соседними кадрами, исключая артефакты.
Практическое применение
Стабилизация текстур критична для реалистичности синтезированного материала, особенно при воспроизведении движущихся объектов и сложных поверхностей. Улучшение позволяет использовать видео в контенте без предварительной постобработки.
Метод апробирован на видео с различными типами материалов: ткани, металл, дерево, вода. Во всех случаях наблюдалось значительное снижение мерцания по сравнению с предыдущими версиями генеративных моделей.
Дальнейшая работа направлена на расширение алгоритма для обработки высокочастотных деталей и текстур с пропускающей способностью.