ИИ позволяет менять фон в YouTube Stories

Создание качественных роликов, в которых герои находятся на необычном, меняющемся или просто монохромном фоне, требует студийных условий: все слышали про зеленый (иногда синий) экран. Программисты из Google...

Создание качественных роликов, в которых герои находятся на необычном, меняющемся или просто монохромном фоне, требует студийных условий: все слышали про зеленый (иногда синий) экран.

Программисты из Google решили упростить жизнь видеоблогерам, которые хотят делать красивые видео с минимальными вложениями. Теперь в мобильном сервисе YouTube Stories можно на лету менять фон. С помощью машинного обучения разработчики создали легковесную и быструю нейронную сеть, которая позволяет менять фон так же просто, как накладывать фильтры в Instagram.

Пока что сервис запущен в тестовом режиме для ограниченного круга пользователей. Алгоритм еще работает не идеально, но точность распознавания будет увеличиваться с наращиванием базы и постепенным обучением алгоритма. Нейронная сеть YouTube научилась выделять общие черты головы и плеч, используя минимальный набор данных. Алгоритм сегментации видео способен обрабатывать более 30 кадров в секунду. Пока что пользователям доступны только готовые варианты фона, и вставить свое изображение нельзя.

Видеосегментация — широко используемый метод, который позволяет отделить передний план сцены от фона и рассматривать их как два разных визуальных слоя. Развитие искусственного интеллекта позволяет выделить передний план без использования зеленого экрана или покадровой обработки видеоматериала.

Разработчики анонсировали сервис YouTube Stories осенью 2017 года. Он очень похож на аналогичные решения от Snapchat, Instagram или Facebook. Решение Google поначалу отличалось лишь тем, что 30-секундные видео из Stories не пропадают через сутки. Теперь разработчики добавили еще одну фишку, которая должна привлечь пользователей и повысить конкурентоспособность сервиса.