Японские и американские разработчики научили нейросеть создавать 3D-модель человека по одной или нескольким фотографиям. Компьютер достаточно реалистично достраивает вид тела со всех сторон, даже со спины. Об этом пишет N+1.
В процессе участвуют две нейросети. Первая получает исходный снимок и определяет, где заканчивается тело и начинается пустота. Затем алгоритм «Шагающие кубики» преобразует точки трехмерного куба в 3D-модель, и ее раскрашивает вторая нейросеть.
По нескольким фотографиям, сделанным с разных ракурсов, алгоритм воссоздавал фигуру наиболее точно. Чтобы обучить компьютер, в него загрузили почти 160 тысяч снимков, а также 3D-моделей людей, полученных с помощью фотограмметрических сканеров. Подробнее о работе алгоритма можно прочитать в статье ученых.
С помощью нейросетей люди создают пиццу, шоколадные трюфели, граффити, духи, одежду и музыку. Об этом — в научном сериале «Как сгенерировать (почти) что угодно».