По данным креативного агентства Narrators Production (входит в E-Promo Group ) Цифровые видеореплики позволяют с высокой точностью воспроизводить внешний вид, жесты, мимику и звуки живого человека. Такие аватары создаются с помощью генеративных нейронных сетей на основе видеороликов и подходят для маркетинга, корпоративных коммуникаций, обучения персонала, интерактивных стендов и взаимодействия с подписчиками в социальных сетях. Об этом рассказала команда агентства.
Для создания аватаров в качестве исходного набора данных для нейросети компания использовала длинные видеоролики со специфической хореографией и различными эмоциями участников. В процессе работы записывается текст, содержащий все необходимые звуки и согласные, что обеспечивает точное цифровое воспроизведение речи. Сбор набора данных и последующая загрузка данных в нейронную сеть может занять несколько часов. Затем с помощью подсказок откорректируйте полученные результаты, чтобы добиться максимально естественного звучания.
Владимир Лутаенко, генеральный директор Narrators Production:
Аватары необходимы, когда вам нужно опубликовать контент, но у вас нет времени на запись. Например, в одном из наших случаев мы снимали видеопередачу, где ведущему приходилось называть данные, которые были известны только за день до их публикации. Используя аватары, вы можете легко заменить информацию более актуальной без необходимости реорганизации снимков.
Авторы проекта отмечают, что создание цифрового голоса, максимально приближенного к человеческой речи, — одна из самых сложных задач при разработке аватара. Согласно внутреннему тестированию, пользователи, взаимодействующие с цифровыми двойниками, в первую очередь озабочены качеством голоса, а не визуальными аспектами. Поэтому при создании цифровой речи необходимо учитывать такие технические детали, как акценты, паузы, эмоциональную окраску речи, а также уникальные характеристики, присущие исходной речи (в том числе словам-вставкам.
Видео с аватарами не имеют ограничения по времени, и в кадре может появляться только один персонаж. Нет никаких ограничений на съемку и создание фоновых изображений.
