Сбер Салют Виртуальные ассистенты

Основные статьи:

• Речевые технологии: на пути от распознавания к пониманию
• Виртуальные помощники (мировой рынок)
• Умные колонки Голосовые помощники (мировой рынок)
• Умные колонки Голосовые помощники (рынок России)

2024: Возможность управлять устройствами Ujin

SberDevices и «Юникорн» осуществили интеграцию платформ умных домов Sber и Ujin. Об этом «Юникорн» сообщил 4 июля 2024 года. Теперь устройствами Ujin можно управлять с помощью виртуального ассистента Салют, в мобильном приложении Салют и на других поверхностях, где доступен умный дом Sber, например, телевизоры или умные колонки. Подробнее здесь.

2023

Переход на GigaChat

Виртуальный ассистент Салют перевели на нейросетевую модель GigaChat, благодаря этому владельцы умных колонок SberBoom и SberBoom Mini теперь могут общаться с ним почти как с человеком. Об этом компания SberDevices сообщила 9 ноября 2023 года.

Раньше, чтобы получить доступ к возможностям GigaChat в ассистенте Салют, пользователям нужно было запустить специальный навык по фразе «Салют, запусти GigaChat». Теперь GigaChat встроен в виртуального ассистента Салют. Количество ежемесячных пользователей (MAU) виртуального ассистента Салют составляет 19,5 млн человек.

Пользователям уже доступны ключевые улучшения:

• Память и контекст. Ассистент помнит контекст последних реплик, поэтому лучше отрабатывает запросы. Например, если пользователь сначала расскажет о том, что любит клубнику, а потом попросит придумать рецепт пирога, то сгенерированный рецепт будет о клубничном пироге.
• Фактология. Когда основан город Дмитров? Почему проекция Меркатора создаёт ошибочное представление о размерах стран? Сколько в России вузов? У пользователей возникают самые разные вопросы, а у ИИ-помощника найдутся ответы на большинство из них. Салют сразу же отвечает на поставленный вопрос и делает это так же быстро и непринуждённо, будто пользователь общается с приятелем. Благодаря GigaSearch ассистент знает практически всё, поэтому в своих ответах оперирует фактами, а не фантазирует.
• Инструкции. GigaChat в Салюте выполняет инструкции человека без запуска отдельных навыков прямо во время диалога. Например, можно попросить ИИ-помощника что-нибудь придумать, а потом скорректировать сгенерированный результат с учётом комментариев.

Большие языковые модели в целом и GigaChat в частности позволяют создавать виртуальных ассистентов на качественно ином уровне. Благодаря GigaChat ассистент Салют стал ещё больше похож на живого человека, дав начало развитию следующего поколения ИИ-помощников. Помимо эмпатии, разных характеров и голосов, у Салюта появилась лёгкость в общении. Пользователю не нужно придумывать, как именно говорить с ИИ-помощником, — не надо запоминать команды, вникать в логику обработки запросов. Достаточно просто говорить с ним как с другом или коллегой, естественно и непринуждённо. Данное обновление Салюта — огромный шаг вперёд в создании ИИ-помощника для человека, сказал Денис Филиппов, CEO SberDevices.

Скоро ассистент заработает и на других умных устройствах Sber.

Доступность GigaChat

21 сентября 2023 года искусственный интеллект Сбера GigaChat доступен пользователям всех умных устройств Sber, а также в мобильном приложении Салют на Android. Подробнее здесь.

Продажа 1,5 млн умных устройств Sber с ассистентом «Салют»

Число проданных умных устройств Sber с ассистентом Салют превысило 1,5 млн. Об этом 15 июня 2023 года сообщил старший вице-президент, СТО, руководитель блока «Технологии» Сбербанка Андрей Белевцев.

При подсчете учитывались ТВ-приставка SberBox, умные колонки SberBoom и SberBoom Mini, телевизоры под управлением операционной системы Салют ТВ, умный дисплей SberPortal, ТВ-медиацентр SberBox Top и медиаколонка SberBox Time. Основная доля продаж пришлась на флагманские ТВ-приставки SberBox.

Совсем недавно мы отмечали важную веху — первый миллион проданных устройств, теперь мы стремительно подошли к еще одной промежуточной отметке в полтора миллиона, пройдя этот путь менее чем за год. Мы действительно наблюдаем растущую популярность наших умных устройств, в частности в сегменте умных колонок и телевизоров с ОС Салют ТВ. В наших планах занять высокие позиции на рынке потребительской электроники, видим своей задачей обеспечить людей умной, доступной и качественной техникой, которая будет гарантировать постоянное развитие сервисов и стабильность их работы, сказал Андрей Белевцев, старший вице-президент, CTO, руководитель блока «Технологий» Сбербанка.

Возможность для предпринимателей выбрать программу господдержки в «СберБизнесе»

Корпоративные клиенты Сбера могут узнать у виртуального ассистента Салют, какие программы господдержки им доступны, и оформить кредит по сниженной ставке в СберБизнесе. Об этом компания сообщила 12 апреля 2023 года.

Общаться с умным помощником можно как голосом, так и текстом. Выбрав подходящую программу, пользователь переходит в веб-версию СберБизнеса, где можно оформить заявку на кредит, причём некоторые поля уже заполнены.

Мы обучили виртуального ассистента Салют очередному навыку: теперь он может консультировать предпринимателей по программам господдержки бизнеса. Умный помощник Сбера расскажет, какие программы льготного кредитования подойдут вашей компании, поможет подобрать оптимальную и переключит на предзаполненную форму кредитной заявки. При этом мы продолжаем расширять наш конструктор госпрограмм: в первом квартале 2023 года мы добавили в него ещё 6 программ. Только за три месяца 2023 года с помощью сервиса наши корпоративные клиенты заключили 1600 выгодных сделок на 16 млрд рублей, сказал Олег Семененко, начальник Управления GR и работы со специальными проектами Сбербанка.

Конструктор программ господдержки — это сервис Сбера, который упрощает предпринимателям доступ к льготным программам поддержки бизнеса. На апрель 2023 года в него входит 30 федеральных и региональных госпрограмм, детально прописаны требования к каждой из них, объём и тип поддержки. Проверить, какие программы доступны конкретной компании, очень просто: достаточно ввести ИНН. Конструктором можно пользоваться как на сайте Сбербанка, так и в системе интернет-банкинга СберБизнес (в мобильной и веб-версии). За два года работы сервиса в нём совершено 19 580 сделок на общую сумму 164 млрд рублей.

2022

Навык сочинять музыку по текстовому запросу

Ассистенты Салют теперь умеют создавать особый музыкальный контент по вымышленному названию артиста и произведения. Об этом Сбер сообщил 23 декабря 2022 года. Попробовать сервис можно в мобильных приложениях Салют и Сбербанк Онлайн, а в скором времени и на умных устройствах Sber. Для этого нужно произнести «Запусти Маэстро», и в открывшемся приложении нажать на надпись «Сгенерировать новый трек».

Сервис Маэстро разработан командой SberDevices на базе нейросетей CLаMP и ранее представленной SymFormer. Создание музыкальных композиций происходит в несколько этапов: сначала пользователь вводит текстовый запрос с вымышленными названиями артиста и композиции, затем полученные данные с помощью модели CLaMP обрабатываются и конвертируются на понятный для генератора мелодий язык и попадают в SymFormer. На последнем этапе композиция, полученная в результате работы SymFormer, озвучивается виртуальными инструментами. Готовый трек можно прослушать через встроенный плеер прямо на устройстве .

Сгенерированные мелодии можно добавлять в свою медиатеку внутри навыка и прослушивать их в любое удобное время. Помимо создания собственного контента можно также послушать треки, сгенерированные другими пользователями по похожим запросам, и оценить их — поставить лайк или дизлайк. На основе ранжирования по результатам оценок формируется рейтинг с самыми высоко оцененными композициями. Наконец, треки можно скачивать или делиться ими в соцсетях.

Сервис подходит как продвинутым любителям технологий и музыки для персонального прослушивания, так и для создания фонового оформления медиа-контента, приложений или мероприятий.

Возможность тренировки знаний на кибертренажёрах

С помощью виртуальных ассистентов Салют пользователи теперь могут потренировать свои знания на кибертренажёрах, а также получить информацию о распространённых уловках киберпреступников и лайфхаках по защите своих денег и данных.

Клиентам Сбера доступны следующие сервисы.

• «Кибербезопасность» — подборка материалов по киберграмотности для всех. Открывается фразой «Запусти кибербезопасность».
• С симулятором «Мошенничество с оформлением кредита» можно потренироваться в общении с виртуальным злоумышленником на примере популярной схемы мошенничества. Открывается фразой «Запусти симулятор "Мошенничество с кредитом"».
• Симулятор «СМС-мошенничество» рассказывает о распространённой мошеннической схеме обмана через СМС, но, главное, даёт оценку корректности действий пользователя. Открывается фразой «Запусти СМС-симулятор».
• Видео по кибербезопасности — подборка видеороликов о распространённых схемах мошенничества (звонки от имени «службы безопасности банка» и «правоохранительных органов»). Запускаются фразой «Открой видео по кибербезопасности».

Мы видим, что уровень бдительности и киберграмотности граждан растёт, и они всё реже попадаются на уловки злоумышленников. Но в ситуации с телефонным мошенничеством одним из ключевых факторов риска для клиента банка является эффект неожиданности. Сбер на протяжении многих лет активно борется с кибермошенниками за каждого клиента. И применяет для этого различные методы и инструменты. Разработанные нами сервисы позволяют пользователю проиграть возможные сценарии разговоров со злоумышленником и подготовить себя к подобным неприятным коммуникациям. Действия, доведённые до автоматизма, в конечном итоге будут способствовать снижению количества успешных мошеннических атак. Активация новых сервисов с помощью наших виртуальных ассистентов Салют станет ещё одной современной мерой противодействия злоумышленникам. И обманутых людей станет ещё меньше, сказал Сергей Лебедь, вице-президент, директор департамента кибербезопасности Сбербанка.

Навык отвечать на вопросы из школьной программы

Помогать детям с уроками теперь могут виртуальные ассистенты Салют — они научились отвечать на вопросы из школьной программы. Об этом Сбер сообщил 5 октября 2022 года. Ребёнок может самостоятельно задавать вопросы по математике, русскому языку и литературе: Сбер, Джой и Афина всё подробно объяснят.

Данный раздел с вопросами школьников разработан совместно с экспертами проекта «Теперь понятно» на образовательном маркетплейсе Edutoria от Сбера. Контент по школьной программе дополняет детскую энциклопедию «Почемучка» — ответы ассистентов Салют на тысячи детских вопросов. «Что такое деление с остатком?», «Как писать жи-ши?», «Как сделать фонетический разбор?» — ассистенты Салют дадут базовые определения и назовут формулы, напомнят порядок действий при решении примеров, ответят на вопросы о правописании и посоветуют, как успешно выполнить домашнее задание. Все ответы связаны аудиоподсказками: ребёнок, даже если он не умеет читать, перемещается из одного вопроса в другой, путешествует по базе знаний, развивается и получает удовольствие.

Энциклопедия «Почемучка» — это тысячи проверенных экспертных ответов на детские вопросы обо всём на свете каждый день 24 часа в сутки: про естественные науки расскажут биологи («Салют, откуда берётся огонь?», «Салют, почему рыбы не тонут в воде?»), про отношения и воспитание — психологи («Салют, может ли быть депрессия у подростка?»), про безопасность — специалисты поисково-спасательного отряда («Салют, что делать, если потерялся на улице?»), про музыку, искусство, космос и пр. — детское издательство «Розовый жираф».

Образовательный контент уже доступен на умных устройствах Sber: SberBox, SberBox Top, SberBox Time и SberPortal, телевизорах под управлением Салют ТВ и в мобильных приложениях Салют и СберБанк Онлайн. Также можно задать вопросы ассистентам Салют в мобильном приложении сервиса Звук.

Поиск банкоматов с поддержкой аудиосценариев для незрячих

Сбер 1 июля 2022 года сообщил об обновлении программного обеспечения на своих банкоматах, и теперь незрячим клиентам банка доступно 37 тыс. устройств самообслуживания по всей стране (80% сети).

Найти банкомат с поддержкой аудиосценариев незрячему помогут виртуальные ассистенты Салют в приложении СберБанк Онлайн. Клиент может задать им вопрос в любой форме, например, «банкомат для незрячих», после чего ассистенты озвучат адреса трёх ближайших доступных банкоматов (на устройстве пользователя должна быть включена функция геолокации). Узнать адреса доступных банкоматов также можно по номеру 900.

А для того чтобы самостоятельно провести операцию в банкомате, человеку с нарушением зрения достаточно иметь с собой банковскую карту и проводные наушники. Как только пользователь вставляет в разъём наушники, банкомат автоматически переходит в специальный режим работы с аудиоподсказками, что позволяет узнать баланс карты, внести и снять наличные. При этом экран устройства погашен, пока подключены наушники, что делает такое обслуживание безопасным, поскольку посторонние лица не могут увидеть данные клиента.

Адаптация всех продуктов и сервисов банка для клиентов с инвалидностью — важное направление ESG-стратегии Сбера. Инклюзивные сервисы не только удобны, но и обеспечивают клиентам с инвалидностью самостоятельность и безопасность конфиденциальных данных.

Возможность консультирования клиентов по вопросам страхования

20 мая 2022 года «Сбербанк» сообщил, что виртуальные ассистенты семейства Салют готовы проконсультировать клиентов по 60 популярным запросам, касающимся рискового страхования. Сбер, Джой и Афина помогут выбрать нужную страховую программу и расскажут о действующих полисах в мобильном приложении СберБанк Онлайн.

Как сообщалось, кроме того, теперь клиенты могут увидеть актуальную витрину страховых продуктов. Все полисы для удобства клиентов разбиты по категориям «Автомобиль», «Ипотека и кредиты», «Имущество и деньги», «Жизнь и здоровье». Чтобы увидеть банковские страховые продукты, нужно нажать на значок ассистентов внизу экрана и спросить: «Салют, какие страховки есть в Сбере?»

Клиент также может попросить виртуального ассистента порекомендовать ему страховку. Помощник подберёт подходящий страховой полис, расскажет про него и направит клиента на оформление — для этого нужно спросить: «Салют, какие страховки мне подходят?»

Виртуальные ассистенты постоянно совершенствуются, что позволяет не нагружать клиента лишними вопросами, оптимизировать пользовательский путь и получать достоверную информацию напрямую.

Возможность получения информации о детских пособиях

27 апреля 2022 года «Сбербанк» сообщил, что ассистенты «Салют» научились рассказывать пользователям о полагающихся детских пособиях. Функция стала доступной благодаря интеграции ассистентов «Салют» с цифровым помощником портала gosuslugi - роботом Максом.

Для того чтобы узнать, может ли пользователь рассчитывать на выплаты, достаточно сказать: «Салют», расскажи про детские пособия» - в мобильных приложениях «СберБанк Онлайн», «Салют» или на умных устройствах Sber. После этого необходимо заполнить простой опросник о себе, своей ситуации и детях - и ассистенты подскажут, какие выплаты можно получать, а также предложат сразу перейти на сайт gosuslugi и оформить там заявку, если это можно сделать онлайн.

Cервис работает по принципу калькулятора: используя базы данных портала gosuslugi и «Сбера» о пособиях, ассистенты «Салют» подбирают из всего перечня детских выплат те, которые подходят пользователю. Также ассистенты расскажут про все необходимые документы или сразу дадут ссылку на оформление заявки на пособие. Если пользователь работает с сервисом в приложении «СберБанк Онлайн», то может также оформить карту «Мир» для получения пособий.

«Сбер» и Минцифры интегрировали ассистентов «Салют» с роботом Максом в июле 2021 г., и с тех пор мы постоянно расширяем количество поддерживаемых госуслуг. Пользователи оценили эту возможность: взаимодействие с порталом госуслуг стало одной из достаточно востребованных функций ассистентов «Салют» в приложении «СберБанк Онлайн». В партнёрстве с коллегами из дивизиона «Особенные решения» мы решили создать дополнительный навык, чтобы пользователи легко узнавали о детских пособиях и о том, как их получить», - говорит Денис Филиппов, CEO SberDevices, вице-президент по новым цифровым поверхностям «Салют» «Сбербанка».

«В России - 18 федеральных и более 160 региональных выплат, которые полагаются родителям в разных жизненных ситуациях. «Сбер» уже более трёх лет развивает сервис «Калькулятор пособий» на сайте, за прошедшие 12 месяцев им воспользовалось более 2,5 миллиона семей. Мы видим, что есть потребность в достоверном ресурсе, где родитель может получить информацию о том, какие пособия ему полагаются и как он может их оформить. Теперь узнать о пособиях стало ещё проще: родители могут сделать это с помощью виртуальных ассистентов «Салют», - говорит Артём Могилин, и. о. директора дивизиона «Особенные решения» «Сбербанка».

Ассистенты Салют в геосервисе 2ГИС на Android

14 апреля 2022 года компания 2ГИС сообщила, что ее пользователи на Android-смартфонах могут взаимодействовать с ассистентами Салют.

Достаточно нажать на иконку ассистентов Салют в левой части экрана и голосом попросить, например, построить маршрут до ресторана, найти ближайшую аптеку, подсказать, как на общественном транспорте добраться до отделения почты. У ассистентов Салют можно будет узнать погоду, спросить, где купить цветы, снять деньги с карты или заправиться. Со временем возможностей ассистентов внутри приложения 2ГИС станет ещё больше.

«Популярность голосового поиска в 2ГИС быстро растёт. Это неудивительно, ведь за рулём или во время прогулки найти адрес или организацию, задать маршрут удобнее голосом, чем нажатиями на экране. Мы считаем, что у голосовых интерфейсов большое будущее, особенно в навигации. По нашим замерам качество распознавания ассистентов Салют выше инструментов Android и iOS», рассказал Михаил Мельников, руководитель направления голосовых сценариев, продакт-менеджер 2ГИС

Отмена комиссии на рекламную монетизацию навыков

Сбер 17 марта 2022 года сообщил, что в марте и апреле 2022 года на платформе SmartMarket разработчики приложений (навыков) для виртуальных ассистентов Салют получат 100% доходов от рекламной монетизации своих приложений. Это распространяется как на тех авторов приложений, у кого уже подключена монетизация, так и на тех, кто подключит её в эти два месяца. На март 2022 года подключить монетизацию могут юридические лица и ИП.

Мы предполагаем, что наше решение отменить комиссию на рекламную монетизацию на SmartMarket не только поддержит членов сообщества разработчиков, но и мотивирует их на создание новых навыков и развитие существующих, благодаря чему возможности ассистентов Салют будут становиться ещё разнообразнее и интереснее для пользователей, - сказал Иван Смирнов, Руководитель SmartMarket.

На SmartMarket существует два типа рекламной монетизации: Rewarded — просмотр рекламного ролика для получения награды, и Interstitial — просмотр рекламы на всём экране устройства при навигации по приложению. На 17 марта 2022 года рекламная монетизация подключена более чем в половине HTML5 игр.

Виртуальные ассистенты Салют, для которых внешние разработчики могут создавать навыки на SmartMarket и подключать рекламу, помогают взаимодействовать с умными устройствами Sber, например, медиаприставкой SberBox. Кроме того, ассистенты Салют доступны в мобильных приложениях СберБанк Онлайн и Салют.

Возможность управления умными устройствами EKF Сonnect

Умные устройства EKF Сonnect теперь работают с виртуальными ассистентами Салют от Сбера. Об этом компания EKF сообщила 2 марта 2022 года. Подробнее здесь.

Доступность навыка быстрого поиска работы

14 января 2022 года сервис «Работа.ру» сообщил, что запустил навык быстрого поиска работы для виртуальных ассистентов семейства «Салют» от «Сбера». Воспользоваться навыком можно на умных устройствах от «Сбера», а также в мобильных приложениях «СберБанк Онлайн» и «Салют». Навык поможет быстро находить подходящие предложения от работодателей по всей России прямо со своего смартфона и без резюме.

«Миссия сервиса «Работа.ру» - сделать поиск работы быстрым и удобным для всех. Запуск навыка для ассистентов «Салют» поможет сделать поиск работы еще проще и доступнее - в том числе благодаря возможностям голосового управления. Это расширяет возможности сервиса «Работа.ру» как для работодателей, так и для соискателей. Скоро мы планируем обучить навык составлять резюме пользователей для быстрых откликов на подходящие вакансии», - рассказал CEO Classified-индустрии «Сбера» Олег Голубцов.

«Ассистенты «Салют» - это связующее звено экосистемы «Сбера», поэтому мы работаем над тем, чтобы расширять число доступных для пользователей сервисов. Благодаря таким экосистемным интеграциям пользователи могут еще быстрее и удобнее выполнять свои задачи - в том числе и искать работу», - отметил Денис Филиппов, CTO SberDevices.

Запустить навык «Работа.ру» можно с помощью более чем 1300 различных фраз, связанных с поиском работы. Например, можно просто сказать «Запусти поиск работы» или уже на старте общения с ассистентом уточнить условия работы: «Салют, найди вакансии повара в Москве» или «Найди работу в Перми с зарплатой от 100 000 рублей».

«Работа.ру» вместе с ассистентами «Салют» поможет найти подходящие предложения о работе по следующим критериям: желаемая должность, город поиска, зарплата, опыт и график работы. Ассистенты распознают названия всевозможных профессий, умеют конвертировать запросы пользователей по зарплате в разных валютах в рубли, а также выдают пользователям подсказки, аналогичные фильтрам на сайте по опыту и графику работы.

Навык строится на опросе, который начинается с ключевой фразы. Например, «Салют, я хочу найти работу» или «Салют, ищу вакансии». После этого ассистент узнает, в каком городе пользователь ищет работу, на какую должность и зарплату претендует. Уже после 2 вопросов ассистенты готовы показать подходящие вакансии. Также ассистенты помогут уточнить дополнительные параметры: график работы, уровень зарплаты и опыт работы. В итоге ассистент показывает человеку список из 15 вакансий в виде карточек, при нажатии на которые пользователь переходит на сайт или в приложение сервиса. Пользователь может посмотреть еще вакансии, сказав «Посмотреть еще» или уточнить параметры поиска.

2021

Доступность умного автоответчика

Сбер 6 декабря 2021 года представила умный автоответчик в приложении Салют: ассистенты Салют оставят персонализированные ответы контактам пользователя и возьмут на себя общение с курьерами и спамерами. Компания представила данный сервис, как ответ на возрастающее количество спам-звонков и однотипных коммуникаций по телефону. Виртуальные ассистенты могут взять на себя общение по вопросам, которые пользователь готов им делегировать — например, взаимодействие со службами доставки. Это еще один важный шаг в развитии ассистентов Салют как полноценных личных помощников — автоответчики сами ответят на входящий звонок, пообщаются со звонящим и передадут пользователю сообщение.

Сервис срабатывает, когда пользователь не может или не хочет отвечать на звонок, или просто находится вне сети. Данная функция также поможет защитить пользователей — звонки с незнакомых номеров можно переключить на виртуальных ассистентов, чтобы не тратить время на спам и не попасться на удочку телефонных мошенников. Для активации сервиса достаточно озвучить голосовой запрос «Салют, подключи автоответчик». До конца 2021 года умный автоответчик станет доступен также в мобильном приложении СберБанк Онлайн.

`Мы продолжаем развивать возможности ассистентов Салют, которые позволят пользователям делегировать своим персональным виртуальным помощникам решение повседневных рутинных задач. Входящие телефонные звонки, которых становится все больше, иногда отвлекают нас от важных дел. Теперь мы можем доверить и эту задачу ассистентам Салют`, - прокомментировал старший вице-президент по новым цифровым поверхностям Сбербанка, CEO SberDevices, Константин Круглов.

Сервис позволяет настроить персональные ответы для определенных номеров из списка контактов пользователя. Например, когда позвонит родсвеник, а пользователь находится на встрече, ассистенты Салют скажут, что человек сейчас занят, и попросят не волноваться. А если пользователь взял выходной посреди недели, ассистент сообщит коллегам, что человек обязательно свяжется с коллегами, когда вернется на работу. При этом ассистенты всегда представляются и ведут разговор от своего имени, чтобы не сложилось впечатления, что общение происходит с живым человеком. Ассистенты также никогда ничего не подтвердят от имени пользователя, например, услугу из спам-сообщения, — в сценариях автоответчика не содержится так называемых ответов-согласий.

Создавать индивидуальные сценарии ответов можно и на незнакомые номера, а также на звонки из организаций. Можно сделать так: когда виртуальный ассистент Салют распознает, что им звонит, например, курьер — то сервис сообщит, что пользователь не может взять трубку, продиктует код домофона и попросят оставить заказ у двери. Или же пользователь знает, что ему позвонят подтвердить запись в поликлинике, но человек не сможет ответить — ассистенты сделают это за пользователя. При этом звонки от курьеров и организаций распознаются не только по номеру телефона, но и по содержанию сообщения. Так, если в ходе разговора ассистент поймет, что пользователю звонят по поводу доставки — например, услышит фразу «Сможете ли вы принять заказ в течение часа» — автоотетчик даст ответ из заранее подготовленного сценария. Для разных организаций можно настраивать свои уникальные ответы. Разумеется, сервис может и просто определять номер и принимать сообщения как обычный автоответчик. При этом благодаря технологиям, созданным в SberDevices, пользователям не обязательно будет даже прослушивать аудиозапись — после звонка пользователю придет push-уведомление со ссылкой на сообщение, в котором будет содержаться текстовая расшифровка всего диалога, а также оригинальная аудиозапись звонка.

Доступность ассортимента «СберМегаМаркета»

Пользователям приложения Салют стал доступен заказ товаров из ассортимента мультикатегорийного маркетплейса СберМегаМаркет. Данная функция расширяет возможности приложения Салют как единой витрины электронной коммерции экосистемы Сбера: в приложении также можно сделать заказ из каталога сервиса доставки товаров СберМаркет, онлайн-магазина Самокат и сервиса доставки готовой еды Delivery Club. В общей сложности пользователям приложения Салют доступно более 4,5 млн разных товаров в 950 городах России. Оформить любой заказ можно в мультимодальном режиме – как с помощью голоса, так и касанием экрана.

Дополнительные возможности приложения меняют формат интернет-шопинга. Теперь пользователю не нужно задумываться о том, где ему сделать заказ, достаточно зайти в приложение Салют, нажать на лава-шар, сказать: «Салют, хочу» или «Салют, закажи», назвать любой товар – от молока до холодильника – и виртуальные ассистенты предложат варианты. Миллионы товаров доступны в одном приложении, а голосовой поиск позволяет экономить время на нахождение нужной позиции в каталоге. Если же нужно заказать товары из разных магазинов – приложение позволяет создать несколько корзин, оформить отдельные доставки на удобное время и отслеживать их статус в едином окне. Посмотреть все заказы и проверить статус активных можно по запросу: «Салют, покажи мои заказы».

Мы в SberDevices стремимся делать повседневную жизнь людей комфортнее. В этом помогают виртуальные ассистенты Салют, которые понимают естественный язык человека и предоставляют единый интерфейс доступа к огромному ассортименту товаров. При этом многие из них можно заказать не только на смартфонах, но и на огромных экранах телевизоров в домах наших пользователей. По нашим данным, порядка половины тех, кто впервые совершил заказы товаров с помощью виртуальных ассистентов Салют, никогда раньше не пользовались сервисами от наших партнеров. А значит, мы не только улучшаем опыт для уже существующих пользователей, но и приводим в сервисы новых клиентов, снижая для них порог входа и позволяя сфокусироваться на главном, например, перестав тратить время на походы в физические магазины, сказал Константин Круглов, Старший вице-президент по новым цифровым поверхностям Сбербанка, CEO SberDevices.

Микс голосового управления и возможностей интерфейса открывает большие возможности применения виртуальных ассистентов не только для индустрии развлечений, но и создаёт эффективный канал для бизнеса и дистрибуции товаров в e-commerce. Помимо уже ставшего привычным заказа продуктов питания, удобным и всё более естественным для пользователей становится покупка одежды, товаров для дома, косметики, игрушек для детей и прочего ассортимента, который доступен на нашем маркетплейсе. Решение позволит человеку не только более комфортно совершать покупки, но и даст возможность совмещать процесс с регулярными рутинными делами, например, при занятии спортом. Таким образом, у клиентов появится больше времени для важных дел и общения с семьей. Также важным драйвером развития в этом контексте является всё более глубокая синергия финансовых сервисов и электронной торговли. В дальнейшей перспективе это способствует построению бесшовного опыта для покупок в кредит и рассрочку, отметил Соломон Кунин, Генеральный директор маркетплейса СберМегаМаркет.

Доступность на базе нейросетевой модели ruGPT-3

12 ноября «Сбербанк» сообщил, что виртуальные ассистенты «Джой» и «Афина» из семейства «Салют» стали разговаривать при помощи генеративной модели естественного языка ruGPT-3 с 760 млн параметров. Переход к использованию нейросетевой модели сделал ассистентов более эмпатичными, позволил им лучше понимать пользователей и давать оригинальные и неожиданные ответы на различные запросы. 

В 2020 году «Джой» стала российским виртуальным ассистентом, который вел разговор с пользователем не заранее заготовленными фразами, а генерируя слова на лету при помощи нейросети ruGPT-2. Теперь же специально для «Джой» и «Афины» следующая версия модели на базе ruGPT-3 была дополнительно обучена для ведения диалогов в соответствии с характерами этих персонажей. Для общения с виртуальными ассистентами на произвольные темы был запущен особый режим непрерывного диалога - достаточно сказать «Афине» или «Джой»: «Давай поболтаем». Откроется диалоговое окно, в котором можно протестировать возможности нейросети ruGPT-3 - она будет генерировать ответы, имитирующие диалог с живым собеседником.

Пообщаться с «Джой» можно на любом умном устройстве Sber, в мобильных приложениях «Салют» или «СберБанк Онлайн», а также телевизорах под управлением «Салют ТВ». Если же предложить «поболтать» другому ассистенту семейства «Салют», «Сберу», то ответит еще одна актуальная языковая модель, основанная на архитектуре SBERT. У нее другой принцип действия - она не генерирует ответную реплику, а использует базу заранее заготовленных фраз, из которой выбирает более подходящую. А в диалоговом режиме ассистента «Афины» используются обе модели, поэтому ответить голосом этого виртуального ассистента может как SBERT, так и ruGPT-3. 

Еще одно умение ассистентов «Салют» оценят те, кто часами не может определиться, что посмотреть вечером. Достаточно сказать: «Салют», посоветуй мне фильм» - виртуальные ассистенты зададут несколько вопросов, которые помогут подобрать кино в соответствии со вкусами и настроением пользователя. Ассистент может спросить пользователя, например, куда он отправится, если ему подарят машину времени - в прошлое или будущее? Пейзаж за окном - это норвежский лес или Средиземное море? Любит ли пользователь взрывы на экране? Проанализировав серию ответов, ассистенты порекомендуют фильм из коллекции онлайн-кинотеатра Okko.

«Развитие эмоционального интеллекта ассистентов «Салют» - одно из важных направлений нашей работы. Нам важно, чтобы пользователи воспринимали ассистентов не как бездушных машин, которые механически выполняют разные задачи, а как собеседников, способных не просто понять запрос, но и вести осмысленный диалог.  Нейросети, подобные ruGPT-3, помогают развивать возможности эмоционального интеллекта ассистентов, благодаря чему взаимодействие человека и техники выходит на следующий уровень», - Константин Круглов, старший вице-президент по новым цифровым поверхностям «Сбербанка», CEO SberDevices.

Версия ruGPT-3 для внешних разработчиков доступна на платформе SmartMarket - единой точке доступа ко всем технологиям «Сбера».

Интеграция с приложением «Ситимобил»

В мобильных приложениях Салют и СберБанк Онлайн теперь можно заказать такси от сервиса городской мобильности Ситимобил с помощью виртуальных ассистентов Салют. Об этом Сбербанк сообщил 9 ноября 2021 года. Подробнее здесь.

Доступность в аудиосервисе "СберЗвук"

8 сентября 2021 года Сбербанк сообщил о том, что в аудиосервисе "СберЗвук" появились виртуальные ассистенты "Салют". Подробнее здесь.

Возможность управления сторонними устройствами умного дома

Сбер открыл возможность управления устройствами умного дома от сторонних производителей с помощью виртуальных ассистентов семейства Салют. Теперь управлять умными световыми решениями Philips Hue, а также лампочками и розетками Aqara, EKF и ELARI можно голосом со смартфонов через мобильное приложение Сбер Салют, а также со всех девайсов Sber – SberPortal, SberBox, SberBox Top, а также с телевизоров под управлением Салют ТВ.Подключение сторонних устройств позволит пользователям на свое усмотрение комбинировать используемые бренды, не переключаясь между разными приложениями для управления ими, что даст им большую свободу выбора гаджетов и сделает комфортнее пользовательский путь.

С устройствами умного дома можно не только регулировать цвет и яркость освещения и выбирать комфортный для глаз режим, но также выбирать динамические световые сценарии, программировать их в зависимости от времени суток и многое другое. Они дают возможность также контролировать расход электроэнергии, удаленно включать или выключать свет и электроприборы. При этом управление через приложение производителя остается также возможным.

Интеграция платформы умного дома Sber с другими производителями дает больше свободы выбора пользователям, они смогут подбирать подходящие гаджеты для дома из линеек партнеров, а подключать их будет так же просто, как родные. Владельцы умных решений Philips Hue, Aqara, EKF и Elari в свою очередь смогут создать единую систему голосового управления ими через умные устройства Sber, которые открывают также доступ к большому количеству услуг и сервисов от экосистемы Сбера и сторонних разработчиков.

Умный дом – это больше, чем лампа с голосовым управлением или таймер для розетки, это целый комплекс сервисов и функций, которые экономят время и призваны сделать жизнь комфортнее. И, конечно, умный дом индивидуален для каждого, человек подбирает именно те устройства, которые ему удобны, а благодаря интеграции платформы умного дома Sber с партнерами, выбор стал легче, ведь разные девайсы теперь можно объединить в одну экосистему с голосовым управлением и массой других полезных сервисов, — сказал Денис Афанасьев, управляющий директор, руководитель направления «Платформы» SberDevices.

Для подключения сторонних устройств нужно связать аккаунты пользователя в системе умного дома производителя и приложении Сбер Салют. Чтобы это сделать, необходимо перейти в раздел «Профиль», выбрать «Сервисы», а затем нажать «Подключить умный дом от других производителей». Далее из списка можно выбрать бренд устройства, которое планируется привязать и дать ему имя, чтобы было удобно управлять голосом.

Возможность обмена валюты с помощью ассистентов "Салют" в мобильном "СберБанке Онлайн"

Пользователям мобильного приложения "СберБанк Онлайн" доступна возможность совершать валютно-обменные операции голосом — с помощью виртуальных ассистентов семейства "Салют". Об этом в Сбере сообщили 3 августа 2021 года. Подробнее здесь.

Интеграция с помощником портала gosuslugi.ru «Максом»

7 июля 2021 года Сбербанк сообщил о том, что виртуальные ассистенты Афина, Джой и Сбер упростят получение госуслуг благодаря интеграции с роботом Максом, помощником портала gosuslugi.ru

Команда SberDevices завершила первый этап интеграции навыков робота Макса в мобильные приложения СберБанк Онлайн и Сбер Салют, а также умные устройства Sber. Подробнее здесь.

2020

В составе смарт-дисплея SberPortal

21 декабря 2020 года компания Сбер объявила о старте продаж анонсированного в сентябре 2020 года смарт-дисплея SberPortal. Устройство с акустикой от Harman Kardon, 10-дюймовым HD-экраном, AI-камерой и интегрированными виртуальными ассистентами Салют уже можно заказать в официальном интернет-магазине за 29 990 руб. Подробнее здесь.

Почти 2 млн пользователей

Аудитория виртуальных ассистентов Сбера приблизилась к 2 млн пользователей. Об этом компания сообщила 9 декабря 2020 года.

Салют помогает человеку бесшовно использовать сервисы экосистемы Сбера в нужный момент так, как ему это удобно.

Воспользоваться возможностями ассистентов можно в специальном приложении СберСалют, с 24 сентября виртуальные ассистенты начали появляться в мобильных приложениях 65 млн пользователей СберБанк Онлайн, а в октябре 2020 гоад в продажу поступила медиаприставка SberBox с Салютом на борту.

С момента проведения Сбер Конф хотя бы один раз к Сберу, Джой или Афине через все поверхности доступа обратилось более 1,8 млн пользователей. В ноябре совокупная месячная аудитория Салюта на всех цифровых поверхностях превысила один миллион пользователей.

С помощью Салюта клиенты Сбера уже перевели друг другу более 80 млн рублей, а самый долгий разговор человека с виртуальным ассистентом длился почти 200 минут.

Чаще всего люди обращались к ассистентам Салюта, чтобы просто поговорить. Самыми популярными задачами, которые пользователи решали с их помощью, были консультации по банковским продуктам, денежные переводы клиентам СберБанка, пополнение счёта мобильного телефона. Кроме того, семейство Салют просили поставить музыку, рассказать о погоде, текущем курсе валют, остатке на счёте. Третий по частоте запрос к ассистентам Сбера — благодарность за решённую задачу — слово «спасибо».

Выбор происходит уже на начальном этапе с краткого представления всех персонажей. Персонажа Сбер выбирает 60% пользователей, 23% выбирает Джой, а 17% — Афину.

Мы рады, что так много людей в нашей стране уже активно взаимодействуют со Сбером, Афиной и Джой. Ежедневно мы отмечаем уверенный рост интереса аудитории к виртуальным помощникам Салюта. Команда продолжает работать над развитием их навыков, активно пополнять каталог доступных приложений, в том числе привлекая в SmartMarket внешних разработчиков, чтобы ассистенты становились ещё более полезными миллионам пользователей по всей России, - сказал Константин Круглов, Старший вице-президент по новым цифровым поверхностям Сбербанка

Семейство виртуальных ассистентов Салют разработано командой SberDevices, которая занимается проектированием решений на основе искусственного интеллекта и созданием умных устройств для большого круга потребителей.

Все ассистенты семейства обладают набором способностей, масштабируемых в зависимости от поверхности, где пользователь взаимодействует с персонажем.

Мобильное приложение СберБанк Онлайн:

Для того чтобы проверить баланс карты, совершить банковский перевод или оплатить мобильный, достаточно просто попросить об этом виртуального ассистента в мобильном приложении СберБанк Онлайн. Также с его помощью можно узнать, как оформить карту, спросить о валютах стран мира и какой будет сумма после конвертации, проконсультироваться по банковским операциям и терминам.

Виртуальные ассистенты семейства Салют умеют не просто отвечать на вопросы пользователя, но и интересоваться вкусами, предпочтениями и фактами из жизни человека. Внутри мобильного приложения СберБанк Онлайн виртуальные ассистенты могут также рассказать о том, какая погода за окном, какие последние новости, и дать справочную информацию о банке и экосистеме Сбера.

Умная медиаприставка SberBox:

В дополнение к умению вести диалог и ряду финансовых навыков, доступных ассистентам в приложении СберБанк Онлайн, внутри умной ТВ-приставки SberBox персонажи Салюта включат нужный телеканал, посоветуют фильм на вечер и закажут к просмотру снеки, помогут найти видео в интернете, включат любимый музыкальный трек, запустят игру на большом экране или подскажут рецепт от шефа с пошаговой видеоинструкцией. Кроме того, Сбер, Афина и Джой возьмут на себя решение бытовых задач, например, сами запишут клиента в салон красоты, поликлинику и даже забронируют столик в ресторане.

Мобильное приложение СберСалют:

Семейство Салют поможет скоротать время за приятной беседой или развлечёт весёлой игрой, расскажет интересные факты и последние новости, сообщит актуальный курс валют, запишет к нужному специалисту через функцию «Дуэт». Настройка умных девайсов под брендом Сбер также происходит внутри приложения СберСалют, там же пользователь может авторизоваться в партнёрских сервисах Okko и СберЗвук.

Презентация семейства виртуальных ассистентов «Салют»

24 сентября 2020 года «Сбер» представил семейство виртуальных ассистентов «Салют». Салют — это семейство виртуальных ассистентов с разными характерами, привычками и мировоззрением. Каждый пользователь получает возможность выбрать близкого по духу персонажа.

Сбер, Джой и Афина — так зовут виртуальных ассистентов, которые совсем скоро станут доступны как на мобильных устройствах пользователей на платформах iOS и Android в приложениях Сбербанк Онлайн и СберСалют, так и в ряде смарт-устройств под брендом Сбер и не только.

Сбер — продвинутый, разбирается в технологиях. Любит красивые, сложные аббревиатуры, при этом лёгок в общении. Интроверт, ценит порядок, но не прочь подурачиться и поиграть. Говорит голосом актёра дубляжа Даниила Щебланова.

Джой — жизнерадостна, обладает высоким эмоциональным интеллектом, помогает решать бытовые вопросы, освобождая время своего пользователя. Оптимист и экстраверт, но уважает личные границы. Говорит голосом актрисы дубляжа Татьяны Ермиловой.

Афина — стремится сделать своего пользователя максимально продуктивным и эффективным, помогает структурировать дела. Следует правилам и соблюдает порядок во всём, систематизирует информацию. Её озвучила телеведущая Анастасия Чернобровина.

Мы создали не просто помощника, а целое семейство AI-персонажей, чтобы дать пользователям возможность выбирать, с кем им комфортнее в данный момент общаться. Ассистентов семейства ʺСалютʺ отличает высокий эмоциональный интеллект: благодаря продвинутой диалоговой платформе каждый персонаж способен поддерживать диалог в свойственной только ему манере, - говорит Константин Круглов, CEO SberDevices

Помощники могут не только поддержать разговор и найти ответы на вопросы, но и заказать еду, записать к врачу или в салон красоты, перевести деньги родственникам или оплатить мобильную связь. Все ассистенты обладают одинаковым набором способностей, поэтому, выбирая одного из них или переключаясь между ними, пользователь в любом случае получает все возможности технологической платформы и экосистемы Сбера.

Чтобы активировать виртуального ассистента на своем смарт-устройстве, достаточно поприветствовать его словом «Салют!», тогда на обращение ответит выбранный в начале взаимодействия персонаж. Либо можно сказать: «Салют, Сбер!» или «Салют, Афина!», если хочется обратиться сразу к конкретному помощнику.

Смотрите также Голосовые помощники (бормотографы)