Компания показала результаты исследования, в котором научили нейронную сеть «заменять» закрытые глаза на открытые. Исследование опубликовано на странице Facebook Research.
Разработчики использовали генеративную состязательную сеть, которая включает две дуэльные нейронные сети. Первая сеть генерирует искусственные примеры из набора данных (фотографии открытых и закрытых глаз). Вторая — пытается отличить «приделанные» глаза от реальных. Тем самым она подталкивает первую создать более убедительные изображения.
Слева направо: исходный образец, исходное изображение, алгоритм открытия глаз Photoshop, алгоритм Facebook
У машин нет интуитивного понимания, что открытие глаз не изменяет цвет кожи вокруг них. Более того, они не знают про цвет глаз или другие биологические особенности. Работала исследователей Facebook заключалась в том, чтобы включить «образцовые» данные, показывающие лицо с открытыми глазами, каким оно должно быть. Из этих данных генеративная состязательная сеть должна узнать не только, как расположены глаза, но какую форму, цвет и так далее имеют глаза конкретного человека.
Результаты можно считать вполне реалистичными: нет рассогласования в цветах и сильно заметных границ «сшивания» исходной фотографии и «накладных» глаз. При опросе люди ошибочно принимали сгенерированные фотографии за настоящие или говорили, что сомневаются. Возможно, что прокручивая ленту новостей никто бы и не заметил, что фотография искусственная.
Однако результаты работы нейронной сети порою всё ещё выглядят странно. ИИ создает странные детали, если глаза человека частично закрывают волосы или не всегда воссоздают правильный цвет кожи. Однако эти проблемы решаются дообучением. Более подробно о работе можно прочитать в самом исследовании (на английском языке).
Источник: Facebook Research
