Серверы и ускорители NVIDIA для ИИ · поставка по России с документами +7 (495) 638-50-58 Перезвоните мне
Подобрать сервер Запросить КП

Сколько памяти GPU нужно для дообучения модели: LoRA, QLoRA или полное

Выберите модель и способ — покажем, сколько видеопамяти понадобится и сколько это карт каждого типа.

  • Результат сразу
  • Диапазон вместо одной цифры

Коротко

  • Калькулятор оценивает видеопамять для дообучения модели способом LoRA, QLoRA или полным и переводит её в число карт.
  • Для модели Qwen3 32B (32,8 млрд параметров) и способа LoRA нужно около 70,6 ГБ: хватает одной карты любого из пяти типов: RTX PRO 6000, H100, H200, B200 или B300.
  • Память берётся из оценочной таблицы, погрешность — от −30 до +50 %.

Память под дообучение — к результату

Способ дообучения

LoRA учит маленькую добавку к замороженной модели; QLoRA дополнительно сжимает саму модель; полное дообучение меняет все веса.

Время обучения черновая оценка

Порядок величины, а не прогноз: доля используемой производительности карты — допущение без источника. Поставьте свои значения.

Допущение: от 10 до 60 %.

Почему LoRA требует в несколько раз меньше памяти, чем полное дообучение?

LoRA замораживает веса модели и учит добавку меньше процента от неё, поэтому памяти нужно в несколько раз меньше, чем при полном дообучении.

Какие серверы каталога подойдут для дообучения?

Под результат: 1 карта RTX PRO 6000. Наличие и срок уточняем при запросе.

1 × RTX PRO 6000 в одном сервере — вариант этой позиции

Серверы на RTX PRO 6000

2 × RTX PRO 6000 · 2 × CPU · 2U

Ускорители
2 × RTX PRO 6000, 96 ГБ
Видеопамять
192 ГБ
Процессоры
1–2 × CPU — по платформе
Высота и питание
2U · ускорители до 1,2 кВт
Охлаждение
воздушное

Модели до 122 млрд параметров в 8 битах

Наличие уточняется

1 × RTX PRO 6000 Workstation в одном сервере — вариант этой позиции (другая редакция — RTX PRO 6000 Workstation; памяти на карту столько же)

Рабочие станции

1–2 × RTX PRO 6000 · башня

Ускорители
1–2 × RTX PRO 6000, 96 ГБ
Видеопамять
96–192 ГБ
Процессоры
1 × CPU — по задаче
Высота и питание
башня · ускорители до 1,2 кВт
Охлаждение
воздушное

Модели до 122 млрд параметров в 8 битах

Наличие уточняется

ближайшая конфигурация: 4 × RTX PRO 6000

Серверы на RTX PRO 6000

4 × RTX PRO 6000 · 2 × CPU · 4U

Ускорители
4 × RTX PRO 6000, 96 ГБ
Видеопамять
384 ГБ
Процессоры
2 × CPU, не менее 32 ядер каждый
Высота и питание
4U · ускорители до 2,4 кВт
Охлаждение
воздушное

Модели до 235 млрд параметров в 8 битах

Наличие уточняется
Все серверы на RTX PRO 6000

Память — по опубликованной оценочной таблице; длинные примеры и большой батч требуют больше. Время — черновая оценка. Расчёт — оценка по формуле и опубликованным данным на дату, указанную в источниках. Это не обязательство и не оферта. Точную конфигурацию определяет инженер по вашей нагрузке и проверяет тестом.

Как считаем: формула, источники, погрешность

Память берётся из оценочной таблицы проекта LLaMA-Factory (раздел Hardware Requirement): столбцы 7, 14, 30 и 70 млрд параметров для шести способов. Между столбцами — линейная интерполяция, до 7 млрд — пропорционально, после 70 млрд — прирост на каждый миллиард. Авторы таблицы сами называют значения оценочными, поэтому мы показываем диапазон от −30 до +50 %.

Число карт — память, делённая на память ускорителя, с округлением вверх. Теоретический минимум полного дообучения — 16 байт на параметр: 2 байта веса, 2 байта градиенты, 12 байт состояния оптимизатора (EleutherAI, Transformer Math 101).

Время: число операций ≈ 6 × параметры × токены датасета × эпохи, делённое на паспортную производительность карты в 16-битной точности с вашим коэффициентом использования. Это порядок величины; коэффициент — допущение, поэтому блок свёрнут и помечен.

Погрешность. Память — от −30 до +50 % (таблица оценочная); время — порядок величины.

Данные справочников — на 06.10.2026.

Как оценить память и число карт для дообучения LoRA?

Метод расчёта

Что считаем. Сколько видеопамяти нужно, чтобы дообучить модель выбранным способом, и сколько карт каждого типа это составляет. Время обучения — отдельный свёрнутый блок: это порядок величины с допущением о доле используемой производительности карты, а не прогноз.

Память берётся из оценочной таблицы проекта LLaMA-Factory (раздел Hardware Requirement): столбцы 7, 14, 30 и 70 млрд параметров для шести способов. Между столбцами — линейная интерполяция, до 7 млрд — пропорционально, после 70 млрд — прирост на каждый миллиард. Авторы таблицы называют значения оценочными, поэтому показан диапазон от −30 до +50 %.

Число карт = память ÷ память ускорителя, вверх до целого. Теоретический минимум полного дообучения — 16 байт на параметр: 2 байта веса, 2 байта градиенты, 12 байт состояния оптимизатора.

Разобранный пример

Модель
Qwen3 32B, 32,8 млрд параметров
Способ
LoRA
  1. Таблица LLaMA-Factory для способа «LoRA» на 32,8 млрд параметров: ≈ 70,6 ГБ видеопамяти.
  2. Погрешность таблицы −30…+50 %: от 49,4 ГБ до 106 ГБ.
  3. Число карт: RTX PRO 6000 (96 ГБ) — 1; H100 (80 ГБ) — 1; H200 (141 ГБ) — 1; B200 (180 ГБ) — 1; B300 (270 ГБ) — 1.

Результат. Для LoRA на 32,8 млрд параметров (Qwen3 32B) нужно около 70,6 ГБ видеопамяти: хватает одной карты любого из пяти типов: RTX PRO 6000, H100, H200, B200 или B300.

Память под дообучение и число карт H200 черновая оценка

Память под дообучение и число карт H200 (черновая оценка)
МодельLoRAQLoRA 4 битаПолное, смешанная точность
7 млрд параметров≈ 16 ГБ (1 карта H200)≈ 6 ГБ (1 карта H200)≈ 120 ГБ (1 карта H200)
32,8 млрд параметров≈ 70,6 ГБ (1 карта H200)≈ 25,7 ГБ (1 карта H200)≈ 641 ГБ (5 карт H200)
70 млрд параметров≈ 160 ГБ (2 карты H200)≈ 48 ГБ (1 карта H200)≈ 1,2 ТБ (9 карт H200)

Источник: эталон расчёта сайта (контрольные примеры) и данные — опубликованные замеры и оценки, характеристики ускорителей, параметры моделей, проверено 06.10.2026.

По формуле инструмента: таблица памяти LLaMA-Factory с интерполяцией, число карт H200 — память ÷ 141 ГБ вверх до целого. Строка 32,8 млрд параметров в LoRA совпадает с примером выше и с результатом калькулятора по умолчанию. Черновая оценка: погрешность таблицы −30…+50 %.

Обновлено
Подобрать Запросить КП Чат