Среди важных обновлений также появилось управление синтезом речи и анимация мимики под собственную аудиозапись. 

Платформа Visper, позволяющая генерировать визуальный контент с помощью цифровых персонажей, открывает своим пользователям новые возможности для создания видеороликов и презентаций, которые сделают их по-настоящему уникальными. В обновлении появились два новых образа — первый на платформе женский анимационный персонаж Матильда и реалистичный мужской персонаж Пётр. Также без специальных инструментов теперь можно расставлять паузы и ударения в речи аватаров и загружать собственный аудиофайл с текстом, под который подстроится мимика персонажа. А оживить ролик можно, загрузив фоновую музыку.

Новые персонажи

На платформе появилась возможность создавать видео с анимационными аватарами, первым из которых стала Матильда, разработанная командой Visper совместно со Sber AR/VR Lab. При использовании этого образа уже доступны все те же функции, что и у реалистичных персонажей: зачитывание текста на русском языке, добавление собственной аудиодорожки, выбор голосовой модели (нейтральная, приветливая или деловая). Также к пяти женским реалистичным образам добавился и мужской персонаж, для которого доступны нейтральная и добрая модели звучания.

Мы в SberDevices стараемся каждый день делать ещё удобнее и эффективнее свои продукты, которые призваны помогать человеку решать его ежедневные задачи. И очередное обновление платформы Visper служит именно этой цели. Одной из новинок стал первый на платформе анимационный персонаж. Теперь пользователям без специальных навыков ещё проще делать красивые и запоминающиеся ролики и презентации в разных стилях, которые можно использовать и для бизнеса. Мы постоянно пополняем линейку персонажей и расширяем возможности, чтобы создаваемый на платформе контент был по-настоящему уникальным и качественным. 

Константин Круглов CEO SberDevices, старший вице-президент по новым цифровым поверхностям Сбербанка

Эмоции, музыка и анимация собственной звуковой дорожки

Ещё одним нововведением стала функция разметки текста на монтажном столе, который зачитывает персонаж. Теперь можно сделать речь аватара более эмоциональной, изменив её темп, добавив паузы и ударения. Делается это очень просто: нужно лишь поставить соответствующие метки в текст — и речь аватара зазвучит по-новому.

Кроме возможности управлять синтезом речи, появилась опция загружать свой аудиофайл с текстом, который будет озвучивать персонаж. Программа сама проанализирует запись и синхронизирует мимику, чтобы она выглядела максимально естественной. В пользовательских записях часто есть посторонние шумы, которые автоматически подавляются, что значительно упрощает работу над роликом и улучшает качество сгенерированного материала. Такая функция к тому же даёт возможность использовать дикторскую речь и записи на других языках.

Также теперь в видео можно даже загружать фоновую музыку, которая будет проигрываться на протяжении всего ролика на громкости 10% от звучания текста персонажа. Эта опция позволяет сделать видео уникальными, более живыми и динамичными, задать нужное настроение. Для того чтобы можно было быстро попробовать, как это работает, на платформе уже есть три трека, созданных при помощи нейронных сетей глубокого обучения, разработанных в SberDevices. 

Подробная информация про обновления Visper на видео.

Для справки:

ПАО Сбербанк — один из крупнейших банков в России и один из ведущих глобальных финансовых институтов. На долю Сбербанка приходится около трети активов всего российского банковского сектора. Сбербанк является ключевым кредитором для национальной экономики и занимает одну из крупнейших долей на рынке вкладов. Основным акционером ПАО Сбербанк является Российская Федерация в лице Министерства финансов Российской Федерации, владеющая 50% уставного капитала ПАО Сбербанк плюс 1 голосующая акция. Оставшимися 50% минус 1 голосующая акция от уставного капитала банка владеют российские и международные инвесторы. Услугами Сбербанка пользуются клиенты в 18 странах мира. Банк располагает обширной филиальной сетью в России: около 14 тысяч точек обслуживания. Зарубежная сеть банка состоит из дочерних банков, филиалов и представительств в Великобритании, США, СНГ, Центральной и Восточной Европе, Индии, Китае и других странах. Генеральная лицензия Банка России на осуществление банковских операций № 1481 от 11.08.2015. Официальные сайты банка: www.sberbank.com (сайт Группы Сбербанк), www.sberbank.ru.

В 2020 году Сбербанк провёл ребрендинг и предлагает частным и корпоративным клиентам финансовые и нефинансовые услуги банка и компаний Группы Сбербанк. Экосистема Сбера сегодня — это множество сервисов для жизни, ежедневная помощь в решении насущных задач частных клиентов и бизнеса. Сайт экосистемы Сбера — www.sber.ru.

SberDevices — компания экосистемы Сбера, центр экспертизы по решениям на основе искусственного интеллекта в таких областях, как речевые технологии, технологии понимания естественного языка, лицевая и голосовая биометрия. Компания также фокусируется на создании умных устройств для конечных потребителей и корпоративных клиентов. SberDevices учреждена в мае 2019 года в качестве Департамента блока «Технологии» Сбербанка.