ВКонтакте сообщили о доступности для пользователей социальной сети функции «Дипфейк».
По информации компании, воспользоваться инструментом можно в редакторе VK Клипов — как в отдельном приложении, так и во вкладке «Клипы» внутри мобильного приложения ВКонтакте. Технология также появилась и в специальном мини-приложении, с помощью которого «Дипфейк» можно опубликовать в VK Клипах и в VK Видео. Результатом можно поделиться с друзьями в личных сообщениях или скачать на устройство.
Функция «Дипфейк» позволяет пользователям создавать реалистичные ролики, в которых возможно примерить на себя лица селебрити. В основе работы технологии — созданные ВКонтакте нейронные сети, которые позволяют трансформировать лицо пользователя в лицо знаменитости, обеспечивая узнаваемые черты звезды и сохраняя фотореалистичность результата. Решение обрабатывает видео практически в режиме реального времени и обладает оптимальной производительностью. По информации на ноябрь 2022 года это позволит создавать ВКонтакте свыше 200000 видео с дипфейками ежедневно.
Создание роликов доступно непосредственно в редакторе сервиса VK Клипов, где на выбранный фрагмент снятого видео можно наложить лицо знаменитости с помощью кнопки «Дипфейк». В мини-приложении достаточно загрузить видео или выбрать из уже доступных на платформе ВКонтакте. Ролик должен быть не длиннее трёх минут для VK Клипов и десяти минут для VK Видео. Своими образами поделилась Ольга Бузова, Клава Кока, Егор Крид, NILETTO, Даня Милохин и Катя Адушкина.
Сгенерированные ролики помечаются специальным вотермарком при экспорте на внешние площадки, чтобы зрители смогли без проблем отличить дипфейк-видео от роликов с реальными звёздами. Кроме того, все обрабатываемые видео проходят автоматическую проверку на соответствие правилам публикации контента ВКонтакте, а пользователи получают дополнительные уведомления о том, что созданные при помощи технологии «Дипфейк» видео носят исключительно развлекательный характер.
Мы внедрили технологию дипфейков в сервис вертикальных роликов VK Клипы, а также предусмотрели возможность загрузки роликов в VK Видео. Это позволит каждому пользователю создавать реалистичные ролики, в которых возможно примерить на себя лица знаменитостей. Наши технологии несут в себе ряд инноваций. Так, например, большинство дипфейк-решений работают по принципу независимой обработки каждого кадра, поэтому даже минимальные изменения в положении и освещении лица на видео часто приводят к дрожанию и бликам. Мы же с командой при разработке технологии «Дипфейк» ВКонтакте решили обрабатывать видео как последовательность кадров с помощью рекуррентной нейронной сети — это позволило не только устранить артефакты, присущие решениям с покадровой обработкой, но и использовать возможности нейронной сети более оптимальным образом, кратно ускорив генерацию дипфейков. В будущем мы планируем поддержать обработку видео в режиме реального времени и интегрировать технологию в другие наши сервисы, например в VK Звонки.
Рассказал Александр Тоболь, СТО ВКонтакте, VK Видео и VK Клипов
По материалам TAdviser