Команда разработчиков из Samsung AI Center Moscow и Сколковского института науки и технологий разработали программу, способную создавать анимированные изображения на основе одного или нескольких кадров. Ранее для такой задачи требовалась целая база изображений.
Из-за сложности составления черт лица и сопоставления их друг с другом, а также способности человека улавливать малейшие недостатки изображения создать реалистичный аватар очень непросто.
Разработанная учеными программа называется Fewshot learning. Используя значительную выборку изображений знаменитостей, разработчики научили ее использовать линии ориентира лиц из базы данных для синтеза изображения нужного человека.
Fewshot learning состоит из трех нейросетей: внедрения, генерации и дискриминатора. Первая из них выделяет из картинки информацию, не зависящую от позы человека; вторая, на основе выборки и результата работы первой сети внедрения, генерирует новые данные; третья же предназначена для оценки качества работы первых двух. Посмотреть на работу Fewshot learning можно в видео ниже.
Поделитесь этим с друзьями!
Будьте первым, кто оставит комментарий
Пожалуйста, авторизируйтесь для возможности комментировать