Услуга · до покупки · по договору
Проектирование GPU-кластера и сети
Считаем кластер из нескольких GPU-серверов: сколько узлов нужно, какая сеть между ними — InfiniBand или Ethernet 400–800G, какое хранилище, питание и охлаждение.
Результат — проект, по которому можно закупать и монтировать.
Коротко
- Проект кластера отвечает на четыре вопроса: сколько узлов, какая сеть между ними, какое хранилище и хватит ли площадке питания и охлаждения.
- Один узел на 8 ускорителях HGX B300 потребляет около 14,5 кВт, до 16,4 кВт в пике, поэтому питание и охлаждение считаются до покупки.
-
Сеть — InfiniBand или Ethernet 400–800G: число портов, уровни коммутаторов и кабели считаем вместе с узлами. Результат — схема и спецификация.
Кому нужна эта услуга
- Тем, кто планирует несколько GPU-серверов и должен понять, какая сеть между ними нужна.
- Заказчикам с ограниченным питанием и охлаждением в серверной: сначала считаем, сколько узлов она выдержит.
- Тендерным отделам, которым нужно описать кластер в техническом задании.
Что входит в услугу
В услугу входят 8 пунктов, первые из них: вводные: задача (обучение, инференс, смешанная нагрузка), число узлов сейчас и через год, модели и объём данных; выбор числа и типа узлов: HGX на восемь ускорителей или серверы с картами PCIe; нужна ли шина NVLink между ускорителями; сеть между узлами: InfiniBand или Ethernet 400–800G, число портов и уровней коммутаторов, кабели и трансиверы; совместимость адаптеров ConnectX и коммутаторов.
- Вводные: задача (обучение, инференс, смешанная нагрузка), число узлов сейчас и через год, модели и объём данных.
- Выбор числа и типа узлов: HGX на восемь ускорителей или серверы с картами PCIe; нужна ли шина NVLink между ускорителями.
- Сеть между узлами: InfiniBand или Ethernet 400–800G, число портов и уровней коммутаторов, кабели и трансиверы; совместимость адаптеров ConnectX и коммутаторов.
- Отдельные сети: управления (BMC), хранилища и доступа пользователей.
- Хранилище: объём и скорость под данные и контрольные точки обучения; общая файловая система или локальные накопители.
- Питание и охлаждение: мощность на узел и стойку, ток на фазу, резервирование, размещение по стойкам.
- Перечень проверок после монтажа: тест обмена между всеми ускорителями тестами NCCL (nccl-tests), измерения заносятся в протокол.
- Спецификация для закупки и перечень работ по монтажу.
Работа идёт в 5 шагов
- Собираем вводныеЗадача, число узлов сейчас и в перспективе, площадка, порядок закупки.
- Предлагаем два-три вариантаРазное число узлов и сеть; для каждого — питание, охлаждение и стойки.
- Считаем сеть и хранилищеПорты, уровни коммутаторов, кабели, хранилище; схема соединений.
- Согласуем проектВыбираем вариант и фиксируем спецификацию.
- Передаём проект и перечень проверокСхема, спецификация, расчёт площадки; перечень проверок после монтажа. Монтаж и проверку сети — отдельной строкой договора.
На выходе — документ, а не устный ответ
Проект кластера
- Схема соединений узлов, сети управления и хранилища.
- Спецификация оборудования и кабелей.
- Расчёт питания и охлаждения по стойкам.
- План размещения в стойках.
- Перечень проверок после монтажа.
- Варианты кластера с обоснованием.
Условия
Услуга оказывается по договору отдельной строкой коммерческого предложения и не обязывает покупать оборудование у нас. Состав проекта и сроки согласуются в договоре. Характеристики сетевого оборудования приводятся по документации производителей.
Полезно вместе с этой услугой
- Как считают GPU-кластер Разбор для руководителя проекта: что нужно решить, когда одного GPU-сервера мало и нужен кластер, и в каком порядке это считают. Числа питания — из спецификаций узлов каталога, сеть — по документации производителей. Гид
- Сеть 400/800G Сеть нужна кластеру из двух и более узлов; одиночному серверу она не нужна. Каталог
- Сеть кластера Сколько коммутаторов и кабелей нужно, чтобы связать N серверов по 8 GPU. Инструмент
- Питание, тепло и стойка Сколько киловатт, стоек и холода нужно под серверы и хватит ли воздушного охлаждения. Инструмент
Какие вопросы чаще всего задают?
Чем InfiniBand отличается от Ethernet для кластера?
Оба варианта выпускаются со скоростью 400 и 800 Гбит/с. InfiniBand широко применяется в вычислительных кластерах, Ethernet привычнее ИТ-службам.
Выбор зависит от задачи, оборудования и опыта ваших администраторов, поэтому в проекте мы сравниваем варианты.
Сколько узлов нужно?
Зависит от модели и нагрузки. Предварительно число оценивается в калькуляторе «Сеть кластера»; в проекте мы считаем его с учётом вашей площадки.
Хватит ли нам питания?
Узел на B300 потребляет около 14,5 кВт и до 16,4 кВт в пике, а обычные залы рассчитаны на 5–8 кВт на стойку. Поэтому питание считается первым — в калькуляторе и затем в проекте.
Нужна ли отдельная сеть управления?
Да. Контроллеры управления (BMC) размещаются в изолированном сегменте — см. «Защита BMC и дисков».
Проектируете ли вы кластер из оборудования, купленного не у вас?
Да, если характеристики оборудования подтверждаются документацией производителя.
Источники по программной части
Источники:
Опишите задачу — ответим, что входит и как оформить
Опишите задачу в паре фраз — инженер подберёт конфигурацию. Ответим в рабочее время.
- Какое оборудование и где оно стоит
- Что нужно сделать
- Есть ли требования технического задания
Пн–Пт 9:00–18:00 мск
Форма работает при включённом JavaScript. Напишите на gpu@vistlan.ru или позвоните: +7 (495) 638-50-58.
Другие услуги
- Расчёт и архитектура Какие ускорители и сколько их нужно под вашу модель и нагрузку — расчёт до покупки. До покупки
- Сборка и нагрузочный тест Сборка по спецификации и проверка под нагрузкой до отгрузки; протокол с измерениями и акт. Перед отгрузкой
- Монтаж и пусконаладка Установка в стойку, питание и сеть, запуск операционной системы; документация на русском языке. На площадке
- Поддержка и сопровождение Состояние ускорителей и дисков, обновление прошивок, замена компонентов — по договору. В эксплуатации
- Защита BMC и дисков Защита весов моделей и данных от снятия дисков, копирования образов и входа через контроллер управления. На площадке и в эксплуатации
- Внедрение LLM под ключ Языковая модель на вашем сервере: выбор, запуск, проверка на ваших вопросах и передача администраторам. От выбора до запуска
- Настройка ПО и драйверов Операционная система, драйвер, CUDA, контейнеры, Kubernetes или Slurm и мониторинг — среда готова к запуску. После монтажа
- Переезд из облака Перенос моделей и данных из облака на свой сервер с параллельной работой до переключения. Переход на свой сервер
- Инструктаж администраторов Показ вашим администраторам, как обслуживать сервер, и письменное руководство для вашего оборудования. После запуска
Дата проверки: 14.10.2026.
