Волосы и ткани реагируют на воображаемый ветер в генерируемых сценах
Волосы и одежда, которые раньше в генерируемых видео висели неподвижно или дёргались рывками, теперь демонстрируют естественное поведение под влиянием движения персонажа и воображаемых условий сцены. Если сценарий указывает на ветер или быстрое движение, ткани и волосы реагируют соответственно.
Это достигается через обучение моделей на данных реальных видео, где физика развевающихся элементов была записана в разных условиях. Нейросеть научилась распознавать связь между движением персонажа, скоростью ветра и результирующей динамикой ткани.
Детализация и реалистичность
Добавление физики волос и тканей повышает реалистичность видео на несколько порядков, потому что зритель подсознательно ориентируется на эти элементы при оценке правдоподобности. Неподвижные волосы сразу выдают синтез.
Для сложных сцен с множеством персонажей и текстилем разработчики могут явно указать параметры среды: направление ветра, скорость, расстояние от источника ветра. Сеть использует эту информацию для более точного расчёта динамики.
Персонажи в длинных платьях, с распущенными волосами или в сценах с ветром теперь выглядят заметно более живыми. Это стало отдельным маркером качества для киностудий, оценивающих сгенерированное видео.