Голографический виртуальный ассистент

Продукт
Разработчики: Accenture
Дата премьеры системы: май 2019
Отрасли: Торговля
Технологии: Робототехника

27 мая 2019 года компания Accenture объявила о создании голографического виртуального ассистента мастерской инноваций Liquid Studio Accenture. На разработку прототипа ушло около месяца.

Прототип голографического виртуального ассистента
«
Такой виртуальный помощник привлекает гораздо больше внимания, чем стандартный touch-screen монитор или приевшиеся всем роботы. Вы видите перед собой 3D проекцию андроида, который разговаривает с вами, шевеля губами и выражая эмоции. При необходимости на проекции выводятся дополнительные изображения, например, интересующий вас товар или навигация по окружающему пространству, - рассказывает Арсений Кондратьев, руководитель Liquid Studio Accenture Russia.
»

В Liquid Studio подключили к голограмме микрофон. Одной из сложностей была обработка звука – при работе виртуального ассистента в торговом зале могут мешать лишние голоса. Проблему удалось решить направленным микрофоном и отдельными алгоритмами back-end разработки на Java.

Микрофон передает текст через платформу по распознаванию речи в диалоговый движок, который стремится выстраивать общение с человеком естественным образом, т.е. избегает языка команд или стандартного «извините, я вас не поняла, повторите». К голограмме подключена камера, которая распознает, когда начать разговор, и анализирует эмоции человека во время диалога.

«
Нам удалось интегрировать все компоненты между собой и добиться осмысленного диалога, без ступора и заминок, - отмечает Арсений Кондратьев.
»

Разработка потенциально имеет широкое применение

По его мнению, разработка потенциально имеет широкое применение – в ритейле, банковском секторе, организации выставок, в музеях и т.д. Тем более, что интерес к виртуальным помощникам растет, ищутся новые сценарии их использования.

«
В связи с развитием сопряженных технологий появилась возможность разрабатывать качественно новых виртуальных помощников. Хороший синтез речи, нормальное поддержание диалога, быстрая работа – все это позволяет приблизить помощника к реальному человеку, а порой даже обойти его в качестве работы. В результате потребитель видит пользу и начинает чаще обращаться к виртуальным ассистентам, а бизнес начинает активнее развивать это направление, - добавляет Кондратьев.
»

Например, с помощью виртуальных ассистентов можно подобрать продукт под свои вкусы и предпочтения, а затем получить маршрут до него. Получить больше информации о выбранном товаре, показав его помощнику: увидеть рейтинги, рекомендации по сопутствующим товарам и релевантные акции. А также получить экспертную помощь в выборе продукта или услуги.

По словам Арсения Кондратьева, ряд компаний проявили интерес к разработке и созданию пилотного образца виртуального ассистента.



Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Promobot (Промобот) (31)
  Яндекс (Yandex) (14)
  Cognitive Pilot (Когнитив Роботикс) (14)
  Nvidia (Нвидиа) (11)
  Сбербанк (10)
  Другие (507)

  ABB Group (7)
  Promobot (Промобот) (4)
  Ростелеком (3)
  АББ Россия (ABB) (3)
  Softline (Софтлайн) (2)
  Другие (59)

  Mains Lab (Мэйнс Лаборатория) (2)
  Яндекс (Yandex) (2)
  Московский центр инновационных технологий в здравоохранении (2)
  Сириус Образовательный центр (1)
  Казань-Телематика (1)
  Другие (45)

  Яндекс.Облако (Yandex Cloud) (2)
  Департамент информационных технологий Москвы (ДИТ) (2)
  Инфосистемы Джет (2)
  Fora Robotics (Фора Роботикс) (2)
  Яндекс (Yandex) (2)
  Другие (46)

  Наносемантика (Nanosemantics Lab) (2)
  Сбер Бизнес Софт (2)
  Синимекс (Cinimex) (2)
  Геоскан (Geoscan) (2)
  Университет Иннополис (2)
  Другие (53)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Promobot (Промобот) (9, 32)
  ABB Group (8, 23)
  Cognitive Pilot (Когнитив Роботикс) (3, 21)
  Cognitive Technologies (Когнитивные технологии) (1, 21)
  Яндекс (Yandex) (2, 11)
  Другие (589, 144)

  ABB Group (2, 11)
  Promobot (Промобот) (2, 4)
  Gaskar Group (Гаскар Интеграция) (1, 2)
  Ronavi Robotics, Ронави Роботикс (ранее Ронави логистические системы) (1, 2)
  Cognitive Technologies (Когнитивные технологии) (1, 2)
  Другие (10, 11)

  Бирюч-НТ Инновационный Центр (2, 1)
  Эфко ГК (2, 1)
  Транспорт будущего (2, 1)
  Gaskar Group (Гаскар Интеграция) (1, 1)
  Rozum Robotics (Розум Роботикс) (1, 1)
  Другие (13, 13)

  Fora Robotics (Фора Роботикс) (1, 2)
  Rozum Robotics (Розум Роботикс) (1, 1)
  Роботех (Robotech) (1, 1)
  Яндекс.Маркет (1, 1)
  3D Bioprinting Solutions (3Д Биопринтинг Солюшенс) (1, 1)
  Другие (5, 5)

  Яндекс (Yandex) (1, 2)
  Pudu Robotics (Pudu Technology) (1, 2)
  Intuitive Surgical (1, 1)
  Unitree Robotics (1, 1)
  КиберСклад (1, 1)
  Другие (1, 1)

Распределение систем по количеству проектов, не включая партнерские решения

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Promobot - 26
  Cognitive Agro Pilot Система автоматического вождения - 21
  ABB IRB Промышленные роботы - 19
  Da Vinci (робот-хирург) - 11
  Nvidia Drive AI-платформа для самоуправляемых автомобилей - 10
  Другие 128

  ABB IRB Промышленные роботы - 8
  YuMi (Мобильный коллаборативный робот) - 4
  Promobot - 4
  Cognitive Agro Pilot Система автоматического вождения - 2
  Ronavi Robotics: H-серия Роботы для обслуживания складов - 2
  Другие 11

  Лаборатория знаний: Neuro Angel - 1
  Роббо Класс - 1
  YaCuAi Робот Unit - 1
  NTR Robotics (БПЛА для закрытых пространств) - 1
  Astabot Робот-палетный перевозчик - 1
  Другие 9

  For-1 Антропоморфный робот - 2
  МИСиС и 3D Bioprinting Solutions: 3D-биопринтер в виде роборуки для применения в операционной in situ - 1
  Da Vinci (робот-хирург) - 1
  Aripix A1 Робот-манипулятор - 1
  Dobot CR-серия Коллаборативные роботы - 1
  Другие 2

  Яндекс.Ровер - 2
  Pudu CC1 Робот-уборщик - 2
  Геоскан БАС (Беспилотные авиационные системы самолетного типа) - 1
  Da Vinci (робот-хирург) - 1
  Роботы КиберСклад - 1
  Другие 1