Нейросети и руки

Нейросети и руки (Нейросети и пальцы) — известная проблема, связанная с нейросетями, которые генерируют картинки.

Типичные руки от ИИ

Подробности

В начале 2020-х появилось множество весьма качественных нейросетей, которые стали создавать картинки, зачастую неотличимые от творчества человека (хоть пока что и требуется ручная проверка и отбор качественных результатов из множества сгенерированных).

Однако, у сетей возникла проблема — при генерации руки человека часто оказывались серьёзно искажены — либо на них было неверное количество пальцев, либо руки сливались, либо скажем появлялось три руки. Именно руки вызывали очень сильные проблемы при том, что вся остальная картинка была верной. Многие отмечали контраст на картинках, где большая часть была нарисована без единого изъяна, но всё портили руки.

При рассматривании таких картинок возникал эффект зловещей долины.

И это не только проблема нейросетей — руки вызывают проблемы и у многих реальных художников, нарисовать анатомически корректные руки крайне тяжело; особенно это касается картинок в жанре аниме, где даже человеческие арты профессиональных австрийцев могут иметь кривые руки.

Проблему связывали с тем, что на многих картинках с людьми руки, в отличие от лица и тела, бывают часто скрыты или видны не полностью. Нейросеть не может понять, что перед ней находится часть людской руки, и полагает, что кусок с тремя пальцами — это и есть рука. Часто руки держат что-то, и нейросеть не может верно понять, где заканчивается рука и начинается предмет. Поэтому при генерации появляются различные искажения.

В современных видеомоделях ситуация стала лучше, однако зато появилась проблема с пониманием физики в целом (из-за чего нейросеть не может правильно отобразить, например, как человек садится в машину и стартует).

Галерея

• 
• 
• 
• 
• 
• 
•