На чем возможно построить мощную ИИ-инфраструктуру: ПАК vs не ПАК (самосбор)

Фрагментированный мир

Отказоустойчивость
Распределенные системы

Доклад принят в программу конференции

Целевая аудитория

Инженеры, архитекторы, ML\AI специалисты, которые работают с разветвленными ИИ-инфраструктурами государственных систем и крупного бизнеса.

Тезисы

  1. Почему стандартом единицы, формирующей инфраструктуру, должны становиться апплаенсы или так называемые ПАКи?
  2. Можно ли построить ПАК на китайских GPU?
  3. Сопоставимы ли метрики производительности GPU при использовании китайских GPU?
  4. Можно ли достроить инфраструктуру с помощью китайских GPU, если она ранее была создана на Nvidia?
  5. Нужно ли централизованное управление GPU, если мы говорим про ПАК?
  6. Комплектующие ПАК могут быть не в реестре и это ни на что не повлияет.
  7. Китайские GPU – хуже, так как приходится иметь дело с непроверенными и не надежными поставщиками.
  8. Что экономически более оправдано – ПАК (как отдельный особенный вид on-prem), или облако?
Юдин Антон Владимирович

Группа Rubytech (Скала^р)

Руководитель направления развития технологий ИИ в продуктах Скала^р Группы Rubytech.
Эксперт в области искусственного интеллекта и аппаратного обеспечения. Более 13 лет опыта в разработке и продвижении высокотехнологичных продуктов и инфраструктурных решений.

Видео