Разработчики из Университета Корнелла обучили нейросеть создавать трёхмерную модель лица по одной фотографии. Уже созданы 3D-изображения Мохаммеда Али, Иэна Кертиса и Дональда Трампа.
В качестве исходного материала для обучения использовались фотографии из Chicago Face Database, где содержатся снимки сотен людей различных возрастов и рас.
Принцип действия таков: программа сначала распознаёт по фотографии форму лица и создаёт для него карту альбедо (степень и количество отражения света). После этого свёрточная нейросеть VGG-19 анализирует изображение, распознает отдельные части лица и подбирает к ним реалистичные текстуры. Нехватку деталей система реконструирует самостоятельно на основе сравнения c другими фото, а также устраняет помехи и недостатки изображения в случае плохого качества исходников.
Как предполагается, такая система пригодится для создания собственных трёхмерных аватаров, в том числе для виртуальной реальности, и для реконструкции внешности исторических персонажей.
