May 21, 2021
Пресс-релиз

Сбер открывает доступ к датасету Golos — самому большому набору речевых данных на русском, размеченному вручную

21 мая 2021. Помимо набора речевых данных на русском языке, датасет Golors включает в себя 1240 часов аудиоданных и обученную на них модель распознавания речи высокой точности. Датасет можно скачать на сайте  GitHub.

Сбер открывает доступ к датасету Golos — самому большому размеченному вручную набору речевых данных на русском языке, включающему 1240 часов аудиоданных, а также обученную на них модель распознавания речи, которая показывает точность, сравнимую с человеческой. Датасет можно скачать на сайте GitHub.

Разрабатывать речевые технологии проще

Данные могут быть использованы для распознавания и синтеза речи. Сбер предоставляет их по лицензии, допускающей использование в исследовательских и коммерческих целях, а это более одного миллиона коротких записей русской речи и соответствующие транскрипции.

Над датасетом работала команда SberDevices: создание такой базы стало возможным благодаря разработке семейства виртуальных ассистентов Салют. Было сгенерировано более 1240 часов речи, похожей на запросы пользователей. Аудиофайлы записаны при помощи краудсорсинговой платформы и специальной студии. Датасет Golos составляют обезличенные записи, прослушанные и размеченные вручную. Точная разметка, полученная благодаря тройному перекрытию, позволяет создавать качественные речевые технологии и продукты.

Помимо данных, Сбер выкладывает обученную на них модель распознавания речи. Она обучалась с использованием мощностей суперкомпьютера «Кристофари» от Сбера на 16 видеокартах Nvidia Tesla V100 в течение восьми дней. Доступная для использования акустическая модель QuartzNet 15x5 была обучена на данных датасетов Golos и Common Voice, а языковая модель KenLM построена на Common Crawl и аннотациях Golos.

Открытие датасета Golos — это очень важный шаг для развития речевых технологий в России, и мы в Сбере рады, что можем применить свой опыт в этой области и продолжить наш тренд делиться своими наработками и технологиями с разработчиками и научным сообществом. Речевые технологии сейчас очень активно внедряются во всех сферах. При этом уже существует масса открытых данных на английском языке, но такого качественного русскоязычного датасета не было. Теперь же есть доступные данные и на русском языке, которые можно использовать для распознавания и синтеза речи, а обученная на них модель показывает очень высокое качество. Мы верим, что датасет Golos даст возможность научному сообществу России двигаться ещё быстрее в совершенствовании русскоязычных речевых технологий

Денис Филиппов
CTO SberDevices

SberDevices — компания экосистемы Сбера, центр экспертизы по решениям на основе искусственного интеллекта в таких областях, как речевые технологии, технологии понимания естественного языка, лицевая и голосовая биометрия. Компания также фокусируется на создании умных устройств для конечных потребителей и корпоративных клиентов. SberDevices учреждена в мае 2019 года в качестве Департамента блока «Технологии» Сбербанка.

Другие пресс-релизы
press
September 22, 2022
Пресс-релиз

Специально для ARTLIFE FEST команда SberDevices совместно с HiFi-сервисом Звук озвучила картины художников с помощью умных медиаколонок SberBox Time. Чтобы «услышать» полотна, достаточно сказать «Салют, как звучит…» и произнести кодовое слово, указанное на табличке рядом с медиаколонкой.

press
September 16, 2022
Пресс-релиз

Теперь Сбер, Афина и Джой могут дать предсказание* от нейросети на любой вкус — для этого достаточно сказать “Салют, расскажи мой нейрогороскоп на завтра”.

press
August 30, 2022
Пресс-релиз

Команда SberDevices запустила Салют Экраны — отечественную платформу digital signage для бизнеса, позволяющую централизованно управлять информационными экранами, создавать для них рекламные кампании, настраивать расписание показов и оценивать эффективность коммуникаций с аудиторией.