Создана нейросеть, которая «оживляет» людей на двумерных фотографиях

Разработчики из Вашингтонского университета создали алгоритм, который может сделать из двумерного кадра анимацию.

Нейросеть обрабатывает фотографию и распознает на ней человека, а затем отделяет эту область от фона. Алгоритм преобразует фигуру в двумерную модель скелета, а потом рисует реалистичный фон в областях снимка, которые изначально были закрыты человеком.

На основе двумерной модели человека ИИ создает трехмерную и накладывает на нее текстуру. В результате этих манипуляций люди могут «выбегать» из кадра и менять положение тела.

У алгоритма два режима: один создает анимацию на мониторе, а другой — в дополненной реальности.