27 июня 2022
Пресс-релиз

Сбер создал инструмент для разработчиков по подключению голосового управления на русском языке в AR и VR приложениях

Команда SberDevices создала набор программных инструментов (Software Development Kit), который позволяет разработчикам приложений с дополненной или виртуальной реальностью добавлять качественное голосовое управление на русском языке. Эта разработка может быть использована для расширения функциональности игровых и образовательных VR-проектов, в виртуальных примерочных, а также при создании метавселенных.

Решение позволяет без дополнительной разработки подключать в приложения, в том числе работающие с VR-шлемами, технологии распознавания и генерации речи SmartSpeech от SberDevices. Например, в приложении для виртуального офиса разработчик сможет добавить функцию создания заметок с помощью голосового ввода. В приложение для проведения VR-конференций можно встроить функцию добавления новых участников голосовой командой, например: «Позови Андрея».

Голосовое управление важно и в навигации по виртуальному пространству: оно даст возможность пользователю перемещаться с помощью голосовых команд, например, «телепортируй меня в гостиную». Приложения с виртуальной и дополненной реальностью для смартфонов часто предполагают необходимость держать телефон перед собой, управление голосом освобождает пользователю руки и может сделать этот опыт более комфортным и безопасным.

Возможность голосового управления особенно актуальна в виртуальной и дополненной реальности, поскольку воспринимается как более естественное продолжение реального опыта взаимодействия в трёхмерном пространстве. А благодаря тому, что SDK создан для лёгкой интеграции SmartSpeech API в продукты, разработанные на одной из самых популярных платформ — Unity, — воспользоваться добавлением голосового управления в свои приложения сможет значительное число разработчиков

Денис Филиппов
CEO SberDevices, вице-президент по цифровым поверхностям Салют Сбербанка

SmartSpeech — сервис, разработанный командой SberDevices, который позволяет без специального оборудования подключать речевые технологии в интерактивных голосовых меню (IVR), автоответчиках, чатах, телемаркетинговых компаниях, голосовых интерфейсах взаимодействия, для озвучивания контента и команд или голосового ввода на устройствах и сайтах. Платформа сама распознаёт и синтезирует речь, а также способна использовать «подсказки», помогающие максимально правильно понимать пользователя, в зависимости от конкретной ситуации. Работа сервиса построена на двух технологиях — распознавания и синтеза речи. Они могут использоваться вместе и по отдельности. При этом сервис реализует множество дополнительных функций, таких, например, как гибкое управление синтезом, распознавание эмоциональной окраски речи и т. д.

Другие пресс-релизы
press
28 ноября 2022
Пресс-релиз

Платформа умного дома Sber стала первой в России полностью автономной системой с виртуальными ассистентами на российском рынке, теперь она работает на собственной облачной инфраструктуре и российских серверах.

press
25 ноября 2022
Пресс-релиз

Теперь всем пользователям виртуальных ассистентов Салют доступен новый развлекательный навык для создания фэнтезийных историй при помощи нейросети. Для этого нужно произнести «Запусти нейрофэнтези».

press
24 ноября 2022
Пресс-релиз

В рамках проходящей 23–24 ноября конференции по искусственному интеллекту AI Journey команда SberDevices представила новый инструмент Molotilka (ML Toolkit for Continuous Learning) для работы с пайплайнами больших языковых моделей.