Когда нейросеть затрудняется с анатомией: какие позы остаются сложными

Несмотря на прогресс в обучении нейросетей, анатомические ошибки остаются одной из главных проблем при синтезе портретов и фигур. Особенно затруднены модели при изображении скрученных поз, когда несколько суставов находятся в необычном положении одновременно.

Сложнее всего генераторам даются экстремальные ракурсы: запрокинутая голова в боковом профиле, перекрут корпуса с поднятыми руками, сидячие позы со скрещенными ногами под углом. Ошибки проявляются не только в деформации конечностей, но и в нарушении пропорций мышц и костных ориентиров.

Где локализуются основные ошибки

Исследователи выделили несколько критических зон: суставы пальцев, переход от шеи к плечам, тазобедренный сустав и колени в согнутом состоянии. Эти участки требуют точного понимания трёхмерной геометрии, которое накапливается в данных обучения неравномерно.

Частичное решение — использование дополнительных контролирующих сигналов вроде карт костей или сеток позиционирования на входе модели. Однако полностью устранить проблему удаётся только на позах, часто встречающихся в обучающих наборах.

Ожидается, что следующее поколение моделей с улучшенной архитектурой пространственного кодирования снизит количество артефактов, но полная анатомическая корректность останется вызовом ещё как минимум год-два.