Nvidia AI Enterprise

Продукт
Название базовой системы (платформы): Искусственный интеллект (ИИ, Artificial intelligence, AI)
Разработчики: Nvidia (Нвидиа)
Дата премьеры системы: 2021/03/09
Технологии: Data Mining,  ITSM - Системы управления IT-службой,  Network Health Monitoring - Мониторинг сети или управление здоровьем-производительностью ИТ-Инфраструктуры,  Виртуализация,  Системы управления производительностью сетевых приложений

Содержание

Основные статьи:

2024: Обнаружение опасной уязвимости в системе управления Nvidia Base Command Manager

В конце ноября ФСТЭК разослала предупреждение об уязвимости BDU:2024-10174[1], обнаруженной в продукте для управления рабочей нагрузкой и мониторинга инфраструктуры NVidia Base Command Manager (BCM), который входит в состав NVidia AI Enterprise. Этот инструмент оптимизирует развёртывание кластера, управляет рабочей нагрузкой и мониторингом инфраструктуры, построенной на продуктах NVidia. Опасность уязвимости оценивается как 9,8 из 10 по CVSSv3. Уязвимость подтверждена производителем и уже устранена.

NVidia BCM является частью AI Enterprise для управления большими ЦОДами

Ошибка BDU:2024-10174 связана с отсутствием процедуры авторизации в одном из компонентов NVidia BCM – демоне CMDaemon. В результате эксплуатации этой уязвимости удаленный злоумышленник может выполнить произвольный код. Уязвимыми являются версии от 10.24.08 до 10.24.09 . Ошибка исправлена в версии 10.24.09a, до которой компания рекомендует обновиться.Александр Семенов, Рексофт: Мы работаем над расширением нашего продуктового портфеля для аэропортов 4.3 т

NVidia BCM предоставляет администраторам крупных ЦОДов, где установлены устройства NVidia, все инструменты для развёртывания и управления центром данных искусственного интеллекта. Наличие подобной ошибки дает злоумышленникам возможность получить контроль над огромными вычислительными ресурсами, которые сейчас используются для обучения ML-моделей и нейросетей.

Место NVidia BCM в архитектуре DGX SuperPOD

«
Уязвимости в Base Command Manager представляют серьезную опасность, – заявил TAdviser Сергей Гордейчик, генеральный директор «СайберОК». – К сожалению, подобные уязвимости действительно распространены и встречаются в интернет-среде. Что касается NVidia, специалисты «СайберОК» ранее выявляли уязвимости на ML-серверах DGX. Подход вендора приятно удивил: выявленные уязвимости были оперативно устранены, а клиенты, чьи серверы оказались в интернете, были своевременно уведомлены. В России NVidia BCM в основном используется только в крупных инсталляциях из-за высокой стоимости. О доступных из интернета экземплярах нам неизвестно.
»

Если исполнение основной рекомендации – обновление ПО до исправленной версии – реализовать не удастся, то специалисты ФСТЭК настоятельно советуют выполнить следующие компенсирующие меры:

  • Использовать средства межсетевого экранирования для ограничения удалённого доступа к уязвимому программному средству;
  • Применять «белые» списки IP-адресов для ограничения доступа к уязвимому программному средству;
  • Ограничить с помощью виртуальных частных сетей удаленный доступ к уязвимому ПО.

К этим рекомендациям можно добавить то, что службе безопасности ЦОДа, где установлен подобный инструмент управления, стоит какое-то время более пристально контролировать поведение соответствующего программного компонента – CMDaemon, стараясь выявить в его логах признаки эксплуатации уязвимости. Это можно сделать как с помощью индикаторов компрометации (IoC), так и анализа поведенческой активности приложения.

2021

Интеграция с VMware vSphere 7 Update 2

19 марта 2021 года компания VMware представила обновленную версию VMware vSphere 7 Update 2 с поддержкой AI-Ready Enterprise. Подробнее здесь.

Анонс Nvidia AI Enterprise

9 марта 2021 компания NVIDIA анонсировала NVIDIA AI Enterprise - программный набор корпоративных инструментов и фреймворков искусственного интеллекта, оптимизированных, сертифицированных и поддерживаемых NVIDIA в VMware vSphere 7 Update 2.

По информации компании, в рамках отраслевого сотрудничества по разработке платформы AI-Ready Enterprise NVIDIA объединилась с VMware для виртуализации рабочих задач, связанных с ИИ, в VMware vSphere с помощью NVIDIA AI Enterprise. Это позволяет предприятиям разрабатывать широкий спектр решений для работы с ИИ, таких, как расширенная диагностика в здравоохранении, умные предприятия для производства и обнаружение мошенничества в финансовых услугах.

Nvidia AI Enterprise

С программным пакетом NVIDIA AI Enterprise ИТ-специалисты сотен тысяч предприятий, использующие vSphere для виртуализации вычислений, теперь могут поддерживать ИИ с помощью тех же инструментов, которые они используют для управления крупномасштабными центрами обработки данных и гибридными облачными средами. Программный пакет NVIDIA обеспечивает масштабируемую, многоузловую производительность ИИ-приложений в vSphere, неотличимую от «голых» серверов.

«
До сих пор пользователи запускали ИИ на выделенных физических серверах (bare-metal servers). NVIDIA AI Enterprise позволяет клиентам сократить время разработки моделей ИИ с 80 до 8 недель, а также позволяет им развертывать и управлять расширенными приложениями ИИ в VMware vSphere с такой же масштабируемой производительностью ускоренных вычислений NVIDIA, которая возможна на выделенном сервере.

рассказал Джастин Бойтано (Justin Boitano), вице-президент и директор по корпоративным и edge-вычислениям в NVIDIA
»

Nvidia AI Enterprise
«
Каждая компания изучает, как модернизировать свою инфраструктуру в соответствии с требованиями приложений искусственного интеллекта. Благодаря NVIDIA AI Enterprise и vSphere 7 Update 2 пользователи VMware теперь могут быстро отслеживать ИИ в своих виртуализированных ЦОД и развертывать сертифицированную инфраструктуру с поддержкой ИИ для своих современных приложений.

пояснил Ли Касвелл (Lee Caswell), вице-президент по маркетингу бизнес-подразделения облачных платформ в VMware
»

Одной из первых, взявших на вооружение NVIDIA AI Enterprise для vSphere, стала компания Optum Technology, входящая в Группу UnitedHealth.

«
ИИ играет важную роль в сервисах на основе данных, которые Optum предоставляет United Healthcare. С программным обеспечением и инфраструктурой NVIDIA AI Enterprise, работающими в нашей среде VMware vSphere, мы сможем поддерживать рабочие нагрузки наших приложений и развертывать ИИ в масштабах предприятия.

дополнил Джастин Потузник (Justin Potuznik), старший главный инженер Optum Technology
»

NVIDIA AI Enterprise обеспечивает совместимость с широким набором ускоренных приложений CUDA, фреймворков ИИ, предварительно обученных моделей и наборов инструментов для разработки ПО, работающих в гибридном облаке. Оптимизация позволяет масштабировать рабочие нагрузки на несколько узлов и запускать большие модели глубокого обучения с полной виртуализацией GPU.

Nvidia AI Enterprise

Для поддержки приложений в NVIDIA AI Enterprise, VMware vSphere 7 Update 2 теперь сертифицировано для графических процессоров с тензорными ядрами NVIDIA A100 в сертифицированных NVIDIA системах, которые включают большие серверы от Dell Technologies, HPE, Lenovo и Supermicro. Благодаря этой сертификации клиенты vSphere, приобретающих лицензию на NVIDIA AI Enterprise, получают прямую пользовательскую поддержку от NVIDIA.

NVIDIA также сертифицировала vSphere как программное обеспечение для виртуализации вычислений, обеспечивающее поддержку гипервизора для динамической миграции с технологией NVIDIA Multi-Instance GPU, которая позволяет разделить каждый графический процессор A100 на максимум семь инстансов на аппаратном уровне, чтобы оптимизировать эффективность рабочих нагрузок любых размеров.

Кроме того, некоторые адаптеры NVIDIA ConnectX теперь сертифицированы для VMware vSAN через RDMA (удаленный прямой доступ к памяти), что снимает задачи коммуникации с CPU и оптимизирует производительность приложений и рентабельность инвестиций в инфраструктуру.

ПО NVIDIA AI Enterprise доступно в виде бессрочной лицензии по цене 3595 долларов США за CPU-сокет. Поддержка Enterprise Business Standard для NVIDIA AI Enterprise стоит 899 долларов США в год за лицензию. Клиенты могут подать заявку на ранний доступ к NVIDIA AI Enterprise при планировании обновления до VMware vSphere 7 Update 2.

Примечания



СМ. ТАКЖЕ (4)


Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Naumen (Наумен консалтинг) (328)
  Softline (Софтлайн) (97)
  Okdesk (Облачные Решения) (41)
  Террасофт (Terrasoft, ТС-Консалтинг) (38)
  Деснол Софт (34)
  Другие (670)

  Okdesk (Облачные Решения) (14)
  Naumen (Наумен консалтинг) (11)
  Крикунов и Партнеры Бизнес Системы (КПБС, KPBS, Krikunov & Partners Business Systems) (7)
  Крок (3)
  Nutanix (бизнес в России) (3)
  Другие (25)

  Naumen (Наумен консалтинг) (14)
  Okdesk (Облачные Решения) (9)
  Elma (Элма, Интеллект Лаб, Практика БПМ) (7)
  БизнесАвтоматика НПЦ (3)
  Helpdesk Systems (2)
  Другие (16)

  Naumen (Наумен консалтинг) (18)
  Elma (Элма, Интеллект Лаб, Практика БПМ) (12)
  SimpleOne (Симпл 1) (10)
  Softline (Софтлайн) (3)
  Медиа-Тел (Media-Tel), ранее Devoteam Russia (2)
  Другие (18)

  Naumen (Наумен консалтинг) (9)
  Астра Группа компаний (7)
  SimpleOne (Симпл 1) (5)
  Флант (Flant) (3)
  Okdesk (Облачные Решения) (2)
  Другие (27)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Naumen (Наумен консалтинг) (7, 353)
  Microsoft (13, 76)
  OmniNet (ОмниНет) (4, 55)
  Террасофт (Terrasoft, ТС-Консалтинг) (4, 47)
  Okdesk (Облачные Решения) (1, 42)
  Другие (593, 559)

  Okdesk (Облачные Решения) (1, 14)
  Naumen (Наумен консалтинг) (3, 12)
  Nutanix (1, 9)
  SOTI (1, 3)
  AutoFAQ (ДипХакЛаб) (1, 3)
  Другие (16, 18)

  Naumen (Наумен консалтинг) (3, 14)
  Okdesk (Облачные Решения) (1, 10)
  Elma (Элма, Интеллект Лаб, Практика БПМ) (2, 7)
  БизнесАвтоматика НПЦ (1, 3)
  Информатика и Сервис (1, 2)
  Другие (9, 9)

  Naumen (Наумен консалтинг) (4, 18)
  Elma (Элма, Интеллект Лаб, Практика БПМ) (1, 12)
  SimpleOne (Симпл 1) (1, 10)
  РусБИТех-Астра (ГК Астра) (1, 3)
  Деснол Софт (2, 2)
  Другие (9, 11)

  Naumen (Наумен консалтинг) (3, 12)
  РусБИТех-Астра (ГК Астра) (1, 10)
  SimpleOne (Симпл 1) (1, 6)
  Флант (Flant) (1, 4)
  Деснол Софт (2, 3)
  Другие (14, 15)

Распределение систем по количеству проектов, не включая партнерские решения

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Naumen Service Desk - 284
  ITSM365.ru - 52
  Okdesk Система учета и регистрации заявок для малых и средних сервисных компаний - 42
  OmniTracker - 41
  Service Desk Итилиум - 33
  Другие 659

  Okdesk Система учета и регистрации заявок для малых и средних сервисных компаний - 14
  Nutanix HCI - 9
  ITSM365.ru - 6
  Naumen Service Desk - 4
  AutoFAQ Нейросеть - 3
  Другие 23

  Okdesk Система учета и регистрации заявок для малых и средних сервисных компаний - 10
  ITSM365.ru - 9
  ELMA365 Service - 6
  Naumen Service Desk - 3
  Visary Help Desk - 3
  Другие 15

  ELMA365 Service - 12
  SimpleOne ITSM (IT Service Management) - 10
  ITSM365.ru - 9
  Naumen Service Desk - 7
  РусБИТех-Астра: ALD Pro - 3
  Другие 14

  РусБИТех-Астра: ALD Pro - 10
  Naumen Service Desk - 7
  SimpleOne ITSM (IT Service Management) - 6
  Flant Deckhouse Kubernetes Platform (DKP) - 4
  ITSM365.ru - 4
  Другие 18

Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Loginom Company (ранее BaseGroup Labs Аналитические технологии) (125)
  БизнесАвтоматика НПЦ (120)
  Инфосистемы Джет (13)
  Сбербанк (10)
  Marketing Logic (Маркетинг Лоджик) (9)
  Другие (641)

  Ростелеком (3)
  БизнесАвтоматика НПЦ (3)
  Сапиенс солюшнс (Sapiens solutions) (2)
  Сбербанк (2)
  IPavlov (Айпавлов) (2)
  Другие (48)

  БизнесАвтоматика НПЦ (12)
  OneFactor (Уанфактор) ЕдиныйФактор (3)
  Платформа больших данных (Platforma) (2)
  К-Скай (K-SkAI) (2)
  HFLabs (ХФ Лабс), ранее HumanFactorLabs (2)
  Другие (57)

  БизнесАвтоматика НПЦ (5)
  Сбер Бизнес Софт (2)
  Группа компаний ЦРТ (Центр речевых технологий) (2)
  Axenix (ранее Аксенчер Россия) Аксеникс (2)
  Департамент информационных технологий Москвы (ДИТ) (2)
  Другие (63)

  БизнесАвтоматика НПЦ (8)
  SL Soft (СЛ Софт) (3)
  Сбер Бизнес Софт (3)
  Полиматика (Polymatica) (2)
  Авантелеком (2)
  Другие (69)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Loginom Company (ранее BaseGroup Labs Аналитические технологии) (2, 236)
  БизнесАвтоматика НПЦ (2, 119)
  Полиматика (Polymatica) (4, 15)
  SL Soft (СЛ Софт) (3, 15)
  Oracle (12, 14)
  Другие (315, 182)

  БизнесАвтоматика НПЦ (1, 3)
  Dell EMC (1, 2)
  Полиматика (Polymatica) (1, 2)
  SL Soft (СЛ Софт) (1, 2)
  Informatica (1, 1)
  Другие (6, 6)

  БизнесАвтоматика НПЦ (1, 12)
  Сбербанк (2, 2)
  Платформа больших данных (Platforma) (1, 2)
  HFLabs (ХФ Лабс), ранее HumanFactorLabs (1, 2)
  К-Скай (K-SkAI) (1, 2)
  Другие (14, 16)

  БизнесАвтоматика НПЦ (1, 5)
  Сбербанк (3, 3)
  Ситроникс КТ (ранее Кронштадт Технологии) (2, 2)
  Группа компаний ЦРТ (Центр речевых технологий) (1, 2)
  Полиматика (Polymatica) (1, 2)
  Другие (16, 19)

  БизнесАвтоматика НПЦ (1, 7)
  SL Soft (СЛ Софт) (3, 4)
  Полиматика (Polymatica) (3, 4)
  Rubbles (Раблз) (1, 2)
  Retail Rocket (Ритейл Рокет) (1, 2)
  Другие (15, 15)

Распределение систем по количеству проектов, не включая партнерские решения

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Deductor - 226
  Visary BI Платформа бизнес-аналитики - 119
  Polymatica Analytics Аналитическая платформа - 13
  IBM SPSS Decision Management - 10
  Loginom Аналитическая платформа - 10
  Другие 167

  Visary BI Платформа бизнес-аналитики - 3
  Polymatica Analytics Аналитическая платформа - 2
  EMC Greenplum Data Computing Appliance - 2
  Loginom Аналитическая платформа - 1
  IBM SPSS Decision Management - 1
  Другие 5

  Visary BI Платформа бизнес-аналитики - 12
  Webiomed - Платформа предиктивной аналитики и управления рисками в здравоохранении на основе машинного обучения - 2
  PolyAnalyst Платформа визуальной разработки сценариев анализа данных и текстов - 2
  Loginom Аналитическая платформа - 2
  Platforma и HFLabs: Технология безопасного метчинга данных - 2
  Другие 11

  Visary BI Платформа бизнес-аналитики - 5
  Polymatica Analytics Аналитическая платформа - 2
  CM.Expert Data Mining платформа - 2
  ЦРТ: Speech Analytics Lab - 2
  PIX Process Management (PIX Процессы) - 2
  Другие 15

  Visary BI Платформа бизнес-аналитики - 7
  Rubbles Customer Insight - 2
  Retail Rocket: Smart Placement Ads - 2
  Polymatica Analytics Аналитическая платформа - 2
  Систематика: Optimining (ранее СвойРМ) - 1
  Другие 9