Сервис синтеза речи Yandex Cloud

Облачная платформа Yandex Cloud представила новый сервис для синтеза речи – Brand Voice Call Center. С помощью этой технологии компании смогут практически в режиме реального времени создавать уникальные голоса для виртуальных операторов колл-центра. «Робота» можно будет научить, например, обращаться к клиентам по именам или согласовывать адреса и названия товаров в заказе. Это позволит персонализировать и оживить общение в голосовых каналах. Brand Voice Call Center уже доступен для компаний и предоставляется по запросу.

Алгоритм обрабатывает один аудиошаблон и на его основе синтезирует сотни таких же фраз, но при этом по скрипту может менять в них отдельные слова. При этом синтезированная речь в Brand Voice Call Center звучит естественно и передает все детали речи живого человека из шаблона: эмоции, интонации, изменения громкости. В качестве шаблонов компании могут использовать фрагменты телефонных записей реальных операторов своих колл-центров. Это первый подобный сервис на русском языке, выпущенный для коммерческого использования.

Для обучения Brand Voice Call Center специалисты Yandex Cloud использовали датасет с тысячами часов записей различных дикторов на русском языке из открытого доступа. Подобный опыт позволяет работать практически с любым голосом без предварительной подготовки. Чтобы речь звучала более естественно, для обучения моделей в сервисе использовали трансформерную архитектуру. В отличие от других нейронных сетей трансформеры позволяют обучать ML-модели параллельно на современных видеокартах (GPU) и концентрироваться на важных частях текста, что повышает качество синтеза.

Сервис уже используется медицинской компанией и крупным телеком-оператором, который применяет Brand Voice Call Center для своих клиентов и видит рост конверсии на 20% в голосовых каналах продаж с помощью этой технологии.