Как стать автором
Обновить

Салют от Сбера в Яндекс.Облаке

JavaScript *Node.JS *Яндекс API *Голосовые интерфейсы *
Tutorial


В сентябре 2020 г. Сбербанк переименовал себя просто в Сбер (т.н. ребрендинг), и на радостях запустил собственную платформу голосовых ассистентов под названием Салют. Особенностью Салюта является наличие сразу трёх голосовых ассистентов на выбор пользователей: Сбер — мужчина, стиль обращения на «вы», Афина — женщина, обращается также на «вы», и Джой — девушка с дружеским «ты».

Сбер (банк, не его тёзка — голосовой ассистент) открыл эту платформу для сторонних разработчиков, пригласив их делать для неё приложения, т.н. смартапы — аналог навыков голосовой помощницы Алисы, и учредив для них конкурс с весьма щедрым призовым фондом. В этом туториале мы рассмотрим как сделать смартап на Node.js, разместить его код в Яндекс.Облаке (используя функции), и, наконец, создать проект в Салюте, пройти там модерацию, и опубликовать наш смартап, чтобы он стал общедоступным.
Читать дальше →
Всего голосов 19: ↑14 и ↓5 +9
Просмотры 6.9K
Комментарии 4

Manipulation Process Efficiency (MPE) Benchmark

Машинное обучение *Разработка робототехники *Робототехника Подготовка технической документации *

Бенчмарк эффективности решения задач манипуляции предметами (MPE)

Назначение: Бенчмарк предназначен для оценки эффективности применения робототехнического комплекса в практических задачах манипуляции предметами по сравнению с другими системами автоматизации (в т.ч. роботизации) или использованием ручного человеческого труда.

Разработано: Лаборатория робототехники Сбера

Внимание! Если вы перешли сюда по ссылке из поисковой системы!

Корректная ссылка на статью: https://habr.com/ru/post/534954/

Читать далее
Всего голосов 4: ↑4 и ↓0 +4
Просмотры 298
Комментарии 0

Manipulation Process Efficiency (MPE) Benchmark

Машинное обучение *Разработка робототехники *Робототехника Подготовка технической документации *

Бенчмарк для технологии манипуляции


Бенчмарк предназначен для оценки эффективности применения робототехнического комплекса (РТК) в задачах манипуляции предметами по сравнению с использованием ручного человеческого труда.

Бенчмарк содержит следующий набор метрик(коэффициентов):

ωaKa — взвешенный коэффициент автономности,
ωlKl — взвешенный коэффициент времени обучения выполнению задачи,
ωwKw — взвешенный коэффициент грузоподъемности,
ωcKc — взвешенный коэффициент коллизионности рабочей сцены,
ωdKd — взвешенный коэффициент тяжелых условий труда,
ωpKp — взвешенный коэффициент брака,
ωoKo — взвешенный коэффициент среднедневной нормы выполнения атомарной операции,
ωeKe — взвешенный коэффициент энтропии.

Обобщенная формула вычисления бенчмарка:
image
Где ωi Ki – взвешенный коэффициент из набора метрик.

Каждая метрика рассматривает характеристику применения робототехнического комплекса по отношению к аналогичной характеристике в случае применения ручного труда и является безразмерной. Значение каждой метрики интерпретируется по отношению к человеку:

  • если значение меньше единицы, то применение РТК для измеряемой задачи обладает меньшей эффективностью по сравнению с использованием человеческого труда.
  • если больше единицы, то применение РТК более эффективно по отношению к использованию ручного труда.
Читать дальше →
Всего голосов 9: ↑9 и ↓0 +9
Просмотры 908
Комментарии 2

Первое место на AI Journey 2020 Digital Петр

Python *Обработка изображений *Машинное обучение *Искусственный интеллект Natural Language Processing *
Из песочницы

Совсем недавно закончилось ежегодное международное соревнование AI Journey, организатором которого является Сбер. В этот раз нам была предоставлена возможность решать несколько задач: Digital Петр: распознавание рукописей Петра I, NoFloodWithAI: паводки на реке Амур и AI 4 Humanities: ruGPT-3. Наша команда приняла участие в решении задачи "Digital Петр: распознавание рукописей Петра I" и заняла первое место.

Читать далее
Всего голосов 16: ↑16 и ↓0 +16
Просмотры 5.2K
Комментарии 0

Моё знакомство с виртуальными ассистентами Салют, а также с платформой SmartMarket и SmartApp

JavaScript *Canvas *API *Голосовые интерфейсы *

Знакомство с виртуальными ассистентами Салют, а также с платформой SmartMarket и SmartApp.

Путь от chat app до canvas app или как создать canvas app на платформе SmartMarket.

Читать далее
Всего голосов 11: ↑10 и ↓1 +9
Просмотры 6.3K
Комментарии 2

Синтез речи виртуальных ассистентов Салют: как мы отошли от классических научных статей, чтобы сделать его человеческим

Блог компании SberDevices Машинное обучение *Искусственный интеллект Natural Language Processing *

Автор исходного изображения: Blue Flourishes/Shutterstock.com

Всем привет! В этом посте мы расскажем про синтез голосов Сбера, Афины и Джой — виртуальных ассистентов семейства Салют. О том, как мы в SberDevices обучали модели, чтобы сделать синтез живым и специфичным для каждого персонажа, а также с какими проблемами столкнулись и как их решали.

Согласно нашей «библии ассистентов», Сбер — энергичный гик, Афина — взрослая и деловая, а Джой — дружелюбная и веселая. Они отличаются не только уникальными характерами, обращением на «ты»/«вы» и предпочтениями в шутках. Мы попытались сделать так, чтобы их личности отражались и в голосах, которыми они разговаривают.


Персонажей озвучили телеведущая Анастасия Чернобровина (Афина) и актёры дубляжа Даниил Щебланов и Татьяна Ермилова (Сбер и Джой). Виртуальных ассистентов можно услышать в приложениях Сбер Салют, СберБанк Онлайн, нашем колл-центре по номеру 900, а также в устройствах SberBox и SberPortal. Всё, что вы услышите, — это синтез речи, реализованный с помощью нейросетей. Он работает на связке Tacotron 2 и LPCNet.

Но, чтобы было понятно, что, зачем и почему, — немного теории и истории

Читать далее
Всего голосов 47: ↑46 и ↓1 +45
Просмотры 8.5K
Комментарии 30

Банки ультимативно лезут к нам в ш̶т̶а̶н̶ы̶ личную жизнь

Блог компании ITSOFT Информационная безопасность *Разработка под Android *Законодательство в IT Финансы в IT

Пару лет назад мы делали обзор премиальных банковских карт и обзор как экономить на страховках, если нет премиалки. А сейчас мы проанализировали порядка сотни приложений банков на права доступа, которые они требуют при установке их мобильного приложения на андроид. Результаты свели в таблицу.

Банковские приложения и сами банки ведут себя очень наглым образом. Уже при установке они запрашивают права доступа, которые им необязательны или совсем не нужны для работы. Например, приложение Сбербанка сразу требует доступ к звонкам и фоткам. Я категорически против. Отказываю. А приложение не хочет работать при таком раскладе.

Читать далее
Всего голосов 209: ↑198 и ↓11 +187
Просмотры 129K
Комментарии 428

Доставка, которая доставляет: субъективные мысли и выводы простого клиента

Блог компании RegionSoft Service Desk *Управление проектами *Управление продуктом *IT-компании

Доставка товаров и продуктов на дом облегчает жизнь, особенно, если это жизнь в условиях самоизоляции или удалённой работы из дома. 2020 год обрушил на наши головы и в наши мобильники почти десяток приложений с собственной доставкой и море интернет-магазинов привычных сетей с услугами сторонних доставщиков. А раз так, почему бы не провести небольшое исследование и не проанализировать, какие они, сервисы доставки, и насколько они отвечают ожиданиям простого клиента. 

Читать далее
Всего голосов 32: ↑32 и ↓0 +32
Просмотры 6.6K
Комментарии 3

КиберВойны ближайшего будущего и почему снова актуален тренд на теорию заговора

Информационная безопасность *Читальный зал Киберпанк Будущее здесь

Июль 2021 года. Пандемия COVID-19. Сколько еще времени нужно для того, чтобы этот вирус оставил нас в покое? 196 млн зараженных, 4 млн летальных исходов, пролитые слезы, пот, пострадавшая экономика и так далее. Можно перечислять бесконечно, какой урон нанесла эта зараза для всего мира. Сегодня хотелось бы заострить внимание на одной из них, а именно – на киберпреступлениях, которые в будущем, вероятно, могут перерасти в настоящие кибервойны.

Но мы начнем издалека. С приходом пандемии многое в наших жизнях поменялось. Особенно часто стали произносить слово «самоизоляция», означающее кардинальное изменение привычного каждому формата существования. Теперь мы проводим бизнес-встречи в тимсе и зуме, а для работы с корпоративными файлами используем VPN. Объемы информации, попадающие в сеть, увеличиваются каждую секунду. Это удобно, это классно, как бы мы вообще пережили такие времена, если бы не наши технические возможности? Как бы в целом функционировала вся экономическая цепочка, формировавшаяся столь долгое время? Вероятно, это была бы трагедия масштабов, которые наш мир, возможно, еще и не видел. Но нет. Компьютеры есть, кабели в океане проложены; заварил себе чаек, посиживая в майке и шортах, и обмениваешься информацией с нужными людьми.

А теперь немного статистики: в 1 квартале 2020 года количество киберпреступлений в России увеличилось на 83,9%, а удельный вес таких деяний достиг 19,9% от общего числа[1].

Читать далее
Всего голосов 17: ↑9 и ↓8 +1
Просмотры 7K
Комментарии 13

Краткий пересказ Towards Pretrained Transformers As universal Computation Engines

Natural Language Processing *
Recovery mode

Данная статья представляет собой вольный пересказ https://arxiv.org/abs/2103.05247

Аннотация

Данная статья является разбором свежей статьи от исследователей из университета Беркли "Pretrained Transformers As Universal Computation Engines". В статье решается задача дообучения трансформеров на новые виды информации, такие как: изображения, битовые операции, математические выражения и последовательности белков. 

Архитектура трансформер стала основой существующих успехов глубокого обучения, породив череду моделей обработки естественного языка таких как GPT, BERT или T5, которые сейчас представлены в зоопарке русскоязычных моделей сбера. Впоследствии архитектура трансформера стала применяться и в задачах  задачах компьютерного зрения (CLIP, ImageGPT, Dall·E).

Идея данной статьи происходит из того, что гигантские языковые модели обучаются на больших массивах данных, в том числе, Википедии, Reddit и т. д. Поэтому модели обладают широкими фактологическим знаниями, например, о годах рождения известных личностей. 

Читать далее
Всего голосов 4: ↑3 и ↓1 +2
Просмотры 1.1K
Комментарии 2

Митап SuperJob по фронтенду больших приложений

Блог компании SuperJob Высокая производительность *Разработка веб-сайтов *JavaScript *Карьера в IT-индустрии

23 сентября в 19:00 SuperJob и Сбер проведут онлайн-митап по фронтенду больших приложений.

Читать далее
Всего голосов 4: ↑4 и ↓0 +4
Просмотры 632
Комментарии 4

Как мы в Сбере формировали сообщество практики по автоматизации DevOps CI/CD

Блог компании Сбер Управление сообществом *DevOps *

Привет, Хабр! Сегодня мы расскажем о том, как подходили к созданию сообщества практики по автоматизации DevOps CI/CD в Сбере. Рассмотрим предпосылки, методологии и лучший мировой опыт, который использовали, а также ключевые проблемы и ошибки. В этой статье опытом делится Рашид Галиев – руководитель группы развития методологии DevOps и внедрения инженерных практик CI/CD, эксперт команды ядра сообщества DevOps в Сбере.

Начну с цифр и предпосылок: у нас порядка 16000 инженеров разных ролей и областей экспертизы, около 3000 продуктовых команд, большое количество систем со своим независимым релизным циклом и достаточно много внедрений в месяц.

Читать далее
Всего голосов 8: ↑8 и ↓0 +8
Просмотры 7.3K
Комментарии 10

Как мы сделали доступными все технологии Сбера на единой платформе: итоги первого года работы SmartMarket

Блог компании Сбер Программирование *Интерфейсы *IT-компании Голосовые интерфейсы *

Год назад, в сентябре 2020 года команда SberDevices выпустила семейство виртуальных ассистентов Салют. В семействе три персонажа — Сбер, Афина и Джой. Они доступны на умных устройствах Sber, устройствах под управлением Салют ТВ и в мобильных приложениях СберБанк Онлайн и Сбер Салют.

Вместе с этим запуском мы запустили первую версию платформы SmartMarket. С инструментами SmartMarket внешние разработчики и бизнес получили возможность создавать приложения для виртуальных ассистентов Салют. 

Иван Смирнов, руководитель NLP-Platform и SmartMarket рассказывает, как мы собрали вместе инструменты и технологии Сбера и к чему удалось прийти за год.

Читать далее
Всего голосов 9: ↑3 и ↓6 -3
Просмотры 3.1K
Комментарии 7

За кулисами хакатона: как выглядят будни ментора и наш подход к организации состязаний от SberCloud

Блог компании Cloud Облачные вычисления *Хакатоны Машинное обучение *Управление проектами *

Привет, я Кирилл Шеховцов, технический лидер в SberCloud и ментор хакатонов Сбера. Я знаю, как выглядит внутренняя кухня таких соревнований, чем они интересны и как сделать так, чтобы ваша команда прошла отбор и победила в конкурсе — обо всем этом расскажу сегодня. Эти знания пригодятся вам не только на хакатонах, но и на других тематических соревнованиях — например, на нашем онлайн-чемпионате по анализу данных AI Journey Contest 2021.

Читать далее
Всего голосов 9: ↑7 и ↓2 +5
Просмотры 1.1K
Комментарии 1

«Эти глаза напротив»: история внедрения биометрического решения в X5 Group

Блог компании X5 Tech Платежные системы *Алгоритмы *Искусственный интеллект Будущее здесь

Привет, Хабр! Мы уже рассказывали о магазине с полностью автоматизированной системой покупок, который получил название «Пятерочки #налету». Но это далеко не все технологические проекты компании. Практически одновременно с новыми автономными «Пятёрочками» мы начали разрабатывать и систему биометрической оплаты. Покупателю достаточно посмотреть в камеру и всё — покупка оплачена. О том, как этот проект внедрялся и что из себя представляет, читайте в нашем новом материале – собрали всю начинку!

Читать далее
Всего голосов 20: ↑10 и ↓10 0
Просмотры 5.8K
Комментарии 41

Максим встретил Олега. Чем грозят разговоры с искусственным интеллектом

Искусственный интеллект Будущее здесь

На прошлой неделе мне позвонил Максим из Сбербанка. Максим премило со мной общался, но что-то в интонациях заставило меня уточнить:

– А вы робот?

– Да, я искусственный интеллект. – Признал Максим.

Но вообще неловко как-то у собеседника уточнять, робот ли он.

Недавно мы с коллегами провели опрос о том, у какого оператора они сталкивались со скрытыми мобильными подписками. В опросе была опция для комментариев о том, что людей вообще не устраивает у операторов, кроме подписок. ⅔ ответов были связаны с навязыванием новых тарифов и практически выкручиванием рук, когда случайное «Да» в разговоре с оператором колл-центра радостно расценивалось как согласие на новый тариф. 

Обсуждая этот опрос и Максима из Сбербанка, мы шутили, что если операторы связи сделают робота Кузьму, который нарвется на робота Олега, а Олег случайно ляпнет «Да» или «Хорошо», то утром вы проснетесь с принципиально новым тарифным планом. Шутки шутками, но такой случай уже произошел: пока хозяин спал, Олег вместо него «согласился» на новый тариф. 

Читать далее
Всего голосов 42: ↑40 и ↓2 +38
Просмотры 32K
Комментарии 140

Чай СБЕРгамотом: хакатон глазами участника

JavaScript *Java *Хакатоны
Из песочницы

Наш рынок растет и развивается. Компании, помимо традиционных кадровых процедур, ищут новые ищут новые пути поиска лучших специалистов. В свою очередь, разработчики, которые креативны по своей природе, готовы презентовать и проявить себя не только в рабочих задачах. Участие в хакатоне - своего рода испытание на прочность, тест собственной скорости ума.

Рад поделиться своим опытом участия в мероприятии в качестве капитана команды "чай СБЕРгамотом".

Про хакатон
Всего голосов 15: ↑10 и ↓5 +5
Просмотры 2.1K
Комментарии 5

Хитрости разработки смартапов для SmartMarket

Голосовые интерфейсы *

Начиная с сентября 2020 года подразделение Сбера SberDevices развивает собственную платформу для разработки приложений, основанных на семействе виртуальных ассистентов (Сбер, Афина и Джой) или смартапов. SberDevices предоставляет набор инструментов для разработки таких приложений - SmartApp Studio, SmartApp Code и другие, а также маркетплейс для загрузки и продажи приложений - SmartMarket. В этой статье я расскажу о локальном тестировании смартапа без необходимости приобретения устройства от Сбера.

Читать далее
Всего голосов 3: ↑3 и ↓0 +3
Просмотры 845
Комментарии 0

Пишем смартапп для ассистента Сбера (пошаговый гайд, без программирования)

Разработка мобильных приложений *Интернет вещей
Из песочницы

Вместо предисловия

В этой статье представлено описание шагов по созданию простейшего диалогового приложения (смартаппа) для устройств Сбера, без программирования (в среде разработки Graph).

Изучить туториал
Всего голосов 9: ↑8 и ↓1 +7
Просмотры 1.5K
Комментарии 0

Исследование: самые узнаваемые игроки IT-рынка России

Блог компании HeadHunter Исследования и прогнозы в IT *Карьера в IT-индустрии IT-компании

C 2018 года мы ежегодно проводим исследование технобренда hh.ru и других игроков IT-рынка. В этой статье мы поделимся с вами последними результатами.

Осенью 2021 года мы опросили более 3 тысяч IT-специалистов, чтобы выяснить, насколько хорошо они знают о нас и других компаниях как о работодателях и где хотели бы работать. Из результатов нашего исследования вы сможете узнать, какими технологиями и языками программирования владеют ваши коллеги и как пандемия повлияла на рабочие процессы в компаниях.

Статью по результатам аналогичного исследования 2020 года можете прочитать здесь.

Узнать подробности
Всего голосов 11: ↑9 и ↓2 +7
Просмотры 3.4K
Комментарии 2