Новый алгоритм оживляет статичные фигуры на фото и картинах

Анимированные виртуальные персонажи делают AR-приложения более эффектными

Разработчики из Вашингтонского университета написали программу, которая распознает людей на фотографиях и картинах и создает их анимированные 3D-модели. В демонстрационном ролике проекта Photo Wake-Up оживают герои известных фотографий, участники музыкальных групп на обложках дисков и даже абстрактные персонажи Пикассо.

Для создания виртуального персонажа программа считывает двухмерное изображение и распознает его отдельные части, такие как конечности, голова и туловище людей. Затем компьютер строит трехмерные полигональные модели, соответствующие персонажу. После анимирования алгоритм достраивает текстуры со всех сторон модели и применяет к ней двигательные паттерны, которые позволяют персонажу ходить, бегать и прыгать.

Результат работы Photo Wake-Up выглядит очень эффектно, правда, некоторые 3D-модели пока что выглядят жутковато из-за несовершенной анимации. Предыдущие версии программы не умели распознавать отдельные части тела, поэтому анимация получалась значительно хуже.

С помощью алгоритма разработчики анимировали фотографии баскетболиста Стефена Карри, космонавта Нила Армстронга и картины Пабло Пикассо.

Среди возможных областей применения новой технологии — создание интерактивных AR-приложений в музеях. В дополненной реальности персонажи картин смогут сойти с полотна и рассказать посетителям интересные факты о произведениях искусства.