Midjourney запатентовал технику трёхмерного шумоподавления при синтезе

Midjourney подала заявку на патент техники, которая применяет трёхмерное шумоподавление к промежуточным представлениям изображения на последних итерациях диффузионного процесса. В отличие от традиционного двумерного шумоподавления, метод рассматривает соседние пиксели в пространственной окрестности и во времени (по шагам генерации).

Инновация заключается в том, что алгоритм анализирует согласованность признаков не только в пределах одного слоя признаков, но и по нескольким слоям модели одновременно. Это позволяет сохранить мелкие детали и текстуры, одновременно убрав артефакты и зашумление.

Практический эффект и значение для индустрии

По открытым тестам, применение метода снижает видимые артефакты на 20–35 процентов в зависимости от сложности сцены. Особенно улучшается качество волос, ткани, тонких геометрических деталей и градиентов.

Патентование этой техники может замедлить её распространение в открытые генераторы типа Stable Diffusion, однако конкурентные решения уже разрабатываются независимо. Вероятно, что через несколько месяцев эквивалентные или улучшенные методы появятся в открытых моделях.

Значение патента скорее символическое — демонстрация того, что даже в fast-moving индустрии генерации компании считают нужным защищать интеллектуальную собственность. Это может повлиять на инвестиции и переговоры с поставщиками облачных сервисов.