О семействе Салют 

Салют — это первое в мире семейство ассистентов с возможностью выбора близкого по духу персонажа, у которого есть свои имя, голос, характер и манера общения. Их трое: Сбер, Афина и Джой, и они могут не только поддержать разговор и найти ответы на вопросы, но и заказать еду, записать к доктору или в салон красоты, перевести деньги и оплатить мобильную связь. 

Выбор персонажа происходит на этапе знакомства с Салют после краткого представления. В дальнейшем пользователь может сменить ассистента командами «Смени персонаж» или «Позови Сбера/Афину/Джой». 

Салют — это не только название семьи ассистентов, но и слово для активации ассистента в устройствах. Это слово, которое легко произносить, оно быстро запоминается, это понятное международное приветствие. Слово не сильно распространено в ежедневном речевом обиходе россиян и не является частью часто употребляемых слов и выражений.

Когда есть простой активатор ассистента, его имя может быть любым: звонким и сочным, как Джой, мелодичным, как Афина, или даже брендом, как Сбер. 

Сбер — зеленый лава-шар, мужской голос, обращение к пользователю на «вы». 

Собирательный образ современного молодого человека, работающего в сфере высоких технологий, с широким кругозором и мягким чувством юмора. Открытый, но не навязчивый, стремится помочь в делах и развлечь шуткой при случае. 

Синтез речи персонажа сделан на основе голоса актера дубляжа Даниила Щебланова, который озвучивает в России героев Райана Гослинга. 

Афина — голубой лава-шар, женский голос, обращение к пользователю на «вы».

Воплощение собранности и спокойствия. У нее все под контролем и разложено по полочкам. Афина стремится сделать своего пользователя максимально продуктивным и эффективным, помогает структурировать дела. Любит артхаусное кино, читает и слушает мировую классику. 

Синтез речи персонажа сделан на основе голоса телеведущей Анастасии Чернобровиной. 

Джой — оранжевый лава-шар, женский голос, обращение к пользователю на «ты».

Жизнерадостный собеседник, яркий и эмоциональный персонаж, помогает решать бытовые вопросы, освобождая время своего пользователя для настоящей жизни. Оптимист и экстраверт, но уважает личные границы. 

Синтез речи персонажа сделан на основе голоса российской актрисы дубляжа Татьяны Ермиловой. 

Отличительные черты 

Виртуальные ассистенты Салют созданы, чтобы взять на себя рутинные задачи человека и сделать повседневную жизнь удобнее. 

• Во-первых, их три, а значит, выше шанс найти того, с кем приятнее общаться. Это первое в мире семейство AI-ассистентов. 
• Во-вторых, семейство Салют реализует концепцию мультимодального интерфейса — помимо речи они способны распознавать жесты, управляются сенсорным интерфейсом или с помощью пульта. 
• Важной особенностью ассистентов семейства Салют является эмоциональная вовлеченность: благодаря продвинутой диалоговой платформе каждый из трех ассистентов способен поддерживать диалог в свойственной его характеру манере, считывать контекст разговора и выражать эмоции. 
• Ассистенты Салют владеют банковскими навыками: могут переводить деньги, оплачивать мобильную связь, проверять баланс карты и т.д*. 
• Они проактивны: умеют не просто отвечать на вопросы пользователя, но и интересоваться вкусами, предпочтениями и фактами из жизни человека, запоминать и оперировать ими при последующем общении. Например, после просмотра фильма ассистент может поинтересоваться, понравилась ли картина, и запомнить ответ для дальнейшего общения. 

Навыки ассистентов семейства Салют

Все ассистенты семейства обладают богатым набором способностей. 

Вот что ассистенты Салют могут уже на старте: 

·       перевести деньги, оплатить мобильную связь;

·       инициировать видеозвонок;

·       включить фильм или музыку;

·       заказать и оплатить снеки**;

·       распознать одежду героев фильмов и предложить купить оригинал или аналог в интернет-магазине прямо во время просмотра;

·       записать пользователя в салон красоты или к врачу ***;

·       найти справочную информацию (общего характера или, например, подробности о контенте);

·       выдавать персонализированные ответы (музыка, фильмы, новости, напоминания и т.д.);

·       найти рецепт и помочь с готовкой;

·       поставить будильник, таймер;

·       подсказать точное время в разных городах;

·       рассказать о погоде;

·       поддержать разговор и т.д. 

Список возможностей Сбера, Афины и Джой постоянно расширяется. Подробнее на sber.ru/salute

Технологии в основе семейства Салют

Технологии, на которых построены продукты, разработаны внутри SberDevices. В их основе — современные научные исследования и компоненты, созданные в компаниях экосистемы Сбер. Система распознавания и анализа речи, основанная на сверточных нейронных сетях и трансформерах, способна не только быстро и с рекордным качеством распознать речь пользователя, но и определять интонации и эмоциональную окраску речи. Это позволяет ассистентам Салют предоставлять сервисы, задействующие технологии «эмоциональных вычислений». Эти технологии — первый шаг в деле устранения эмоционального барьера между человеком и машиной.

Синтез речи — также собственная разработка Сбера. Система нейросетевого синтеза речи, основанная на рекуррентно-сверточной архитектуре Tacotron/Tacotron-2. Отбор целевых голосов для ассистентов Салют основан на научных исследованиях о привлекательности речи для слушателей.

Система нейросетевого синтеза речи SberDevices позволяет управлять ударениями, интонациями, темпом, смысловыми акцентами и даже эмоциональной окраской речи, а также использовать ряд специальных голосовых эффектов. Благодаря этому включенность во взаимодействие с пользователем выходит на новый уровень.

Блок понимания естественного языка (natural language understanding, NLU) использует современные нейросетевые модели на основе модифицированных многослойных трансформерных архитектур, в том числе с блоками разреженного внимания. Впервые в пользовательском решении при подготовке ответа на запрос человека использована генеративная нейросетевая модель, представляющая собой улучшенный вариант сети GPT-2. Это значит, что при общении с человеком нейронная сеть может не только выбрать заготовленную фразу из библиотеки, но и сложить новое предложение из слов или их фрагментов. Общаться с таким собеседником гораздо интереснее — он способен удивить.

В устройствах и ассистентах от SberDevices реализованы и мощные технологии машинного зрения. Устройствами, оснащенными камерой, например, можно управлять при помощи жестов. Также пользователям доступны динамичные игры, основанные на движениях. Это достигается при помощи многослойной сверточной нейронной сети, работа которой происходит прямо на устройстве. Для этого «на борту» наиболее продвинутых устройств SberDevices размещен специальный нейросетевой процессор. Он же отвечает за распознавание ключевых слов, предназначенных для активации устройства. 

Для решения всех этих задач требуются огромные вычислительные мощности. Эффективная реализация этих задач стала возможна благодаря суперкомпьютеру Кристофари от SberCloud.

Где живет Салют?

Виртуальные ассистенты в ближайшее время появятся в мобильных приложениях Сбербанк Онлайн и Сбер Салют, а также будут интегрированы в умные устройства от SberDevices — SberBox и SberPortal. В перспективе Салют объединит возможности многих сервисов экосистемы Сбер в едином удобном окне.