На главную Наши проекты:
Журнал   ·   Discuz!ML   ·   Wiki   ·   DRKB   ·   Помощь проекту
ПРАВИЛА FAQ Помощь Участники Календарь Избранное RSS
msm.ru
! Внимательно прочитайте правила раздела
1. Запрещается публиковать материалы защищенные авторскими правами.
2. Запрещается публиковать новостные материалы без ссылки на источник
Модераторы: ANDLL, B.V.
  
    > Itglobal.com запустила специализированную GPU-инфраструктуру для инференса нейросетей и корпоративных LLM
      Itglobal.com запустила специализированную GPU-инфраструктуру для инференса нейросетей и корпоративных LLM

      Компания Itglobal.com (международное облачное направление корпорации ITG) представила новое решение в портфеле GPU-услуг...

      Компания Itglobal.com (международное облачное направление корпорации ITG) представила новое решение в портфеле GPU-услуг — инфраструктуру, оптимизированную для эксплуатации нейросетей и больших языковых моделей (LLM). Решение ориентировано на компании, которые переводят свои ИИ-разработки в стадию реального использования в ИТ-ландшафте. Услуга может предоставляться в формате виртуальных ресурсов, выделенных серверов или частных облаков.

      По оценкам экспертов рынка к началу 2026 г. более 40% крупных компаний уже интегрировали LLM в свои критические бизнес-процессы. Однако при переходе от экспериментов к массовому использованию бизнес сталкивается с тем, что инфраструктура для инференса требует иных архитектурных решений, чем этап обучения.

      Если обучение нейросетей характеризуется периодическими пиковыми нагрузками, то работа модели в составе действующих систем предполагает непрерывную обработку запросов с предсказуемым временем отклика. По этой причине требования к инфраструктуре для инференса отличаются от требований к GPU-кластерам для обучения моделей. Стандартные конфигурации не всегда обеспечивают необходимую стабильность и минимальные задержки при постоянном потоке запросов.

      Специализированная GPU-инфраструктура Itglobal.com построена с учетом требований прикладных сценариев к производительности. Архитектура обеспечивает стабильное время отклика и предсказуемую производительность ИИ-приложений. Решение построено на базе ускорителей Nvidia RTX Pro 6000 Blackwell Server Edition, Nvidia L40S и Nvidia H200.

      «Корпоративные языковые модели перешли от этапа экспериментов к стадии активной эксплуатации в составе критичных систем. В таких сценариях важна не просто доступность GPU, а специализированная среда, учитывающая характер нагрузки инференса. Мы предложили готовое решение, которое позволяет заказчикам обеспечить стабильную работу ИИ-сервисов без необходимости инвестировать в собственное сложное оборудование и его обслуживание», — отметил Евгений Свидерский, директор облачного бизнеса Itglobal.com, корпорация ITG.

      В рамках услуги доступен выбор конфигураций для разных стадий ИИ-проекта: от первичного тестирования до эксплуатации высоконагруженных систем с интенсивным параллельным инференсом. Подбор мощностей осуществляется индивидуально под параметры конкретной модели: её размер, интенсивность запросов и требования к скорости генерации ответов.

      Адрес новости:
      https://corp.cnews.ru/news/line/2026-03-16_itglobalcom_zapustila_spetsializirovannuyu

      1 пользователей читают эту тему (1 гостей и 0 скрытых пользователей)
      0 пользователей:


      Рейтинг@Mail.ru
      [ Script execution time: 0,0114 ]   [ 14 queries used ]   [ Generated: 17.03.26, 10:49 GMT ]