NVLink 2.0 · Единый вычислительный модуль

Четыре Tesla V100, сшитые в один организм

Заводская связка 4× V100 SXM2 по NVLink 2.0 с общим пулом до 128 ГБ HBM2. Подключение к ПК — один слот PCIe x16. Готово к работе под LLM, обучение и научные расчёты.

128 ГБHBM2, общий пул
~300 ГБ/сNVLink между GPU
20 480CUDA-ядер всего
Вычислительный модуль 4× Tesla V100 в сборе с хост-картой и кабелями
⚙️ 4× V100 SXM2 · хост-карта OLDMONSTER · в сборе

Что такое сервер на 4× Tesla V100

Сервер на 4× Tesla V100 — это вычислительный узел с четырьмя ускорителями Tesla V100 SXM2, объединёнными шиной NVLink 2.0 в общий пул видеопамяти 128 ГБ. Используется для локального запуска больших языковых моделей: 128 ГБ достаточно, чтобы держать модель на 70 миллиардов параметров в 4-битном квантовании с запасом под контекст. Цена комплекта — от 170 000 ₽.

VOLTA GV100· NVLINK 2.0· 5120 CUDA / GPU· HBM2 16–32 ГБ / GPU· PCIe x16 SINGLE-SLOT· PEX8749 SWITCH· 1200 Вт· VOLTA GV100· NVLINK 2.0· 5120 CUDA / GPU· HBM2 16–32 ГБ / GPU· PCIe x16 SINGLE-SLOT· PEX8749 SWITCH· 1200 Вт·
Технические характеристики

Спецификация модуля

Цельный модуль из четырёх ускорителей V100 SXM2 на единой мостовой плате.

4×Tesla V100 SXM2 (Volta)
5120 ×4CUDA-ядер на GPU
NVLink 2.0прямой канал между GPU
~300 ГБ/спропускная NVLink
64–128 ГБHBM2, общий пул
PEX8749PCIe-коммутатор
1× x16подключение PCIe к ПК
1200 Вт2×12VHPWR+2×6pin+2×EPS
Архитектура

Почему это «один организм», а не четыре карты

Тяжёлый трафик идёт напрямую между GPU по NVLink — минуя узкий PCIe и центральный процессор.

Прямой NVLink 2.0

Между GPU — выделенный канал ~300 ГБ/с, на порядок шире PCIe. Карты обмениваются данными напрямую, не нагружая CPU.

Один слот PCIe x16

Хост-карта OLDMONSTER в слоте x16 разводит линии через коммутатор PEX8749 на бэкплейн (GPU0–GPU3) четырьмя кабелями SFF-8643.

Общий пул памяти

До 128 ГБ HBM2 адресуются всеми GPU — помещаются модели, которые не влезают в одну карту. Удобно для LLM 50B+.

Масштабирование

Рост производительности почти линейный

За счёт NVLink каждая добавленная карта даёт почти полный прирост. У отдельных карт по PCIe прирост быстро затухает.

1 GPU
1.0×
2 GPU
1.95×
3 GPU
2.85×
4 GPU
3.8×

Связка 4× V100 по NVLink: 1× → 1.95× → 2.85× → 3.8×.

Четыре отдельные карты по PCIe: 1× → 1.8× → 2.4× → 2.6× — каждая следующая добавляет всё меньше.

Цифры масштабирования и производительности — по данным продавца для типовых задач; фактический результат зависит от модели, фреймворка и настроек.

Результаты тестов

Реальная скорость на 4× V100

Замерено на реальной сборке: модель gpt-oss 120B (MoE), движки LM Studio (GGUF) и vLLM (tensor-parallel, NVLink).

45 ток/с

LLM на 120B в одном потоке — комфортно для локальной работы с большой моделью.

до 433 ток/с

Агрегат при 16 параллельных запросах (vLLM tensor-parallel + NVLink) — отдача многим клиентам.

42 ток/с на 100k

Скорость почти не падает даже при контексте 100 000 токенов.

~9000 ток/с

Prefill (обработка промпта): запрос на 1.5k токенов — отклик ~0.2 с.

128 ГБ HBM2

Общий пул памяти — помещаются модели вплоть до 120B+.

20 480 CUDA · NVLink

4× V100 SXM2, полный NV2-меш (24 линии) — карты работают как одна.

Сравнение

Почему не четыре отдельные игровые карты

Стоковые игровые карты (по 24 ГБ) не видят друг друга и общаются через CPU по узкому PCIe.

Параметр4× игровые карты (сток, 24 ГБ)4× V100 NVLink (этот модуль)
Связь между GPUчерез CPU по PCIeпрямой NVLink 2.0 ~300 ГБ/с
Память4× раздельно по 24 ГБобщий пул 64–128 ГБ HBM2
Масштабирование на 4 GPU≈2.6×≈3.8× (почти линейно)
Подключение4 слота PCIe1 слот PCIe x16
Модели 50B+ в одном пуленетда

Сравнение приведено по позиции продавца для задач с интенсивным обменом между GPU. Игровые карты сильнее в FP8/новых форматах и свежих фреймворках. Кстати, про 4090: у нас есть и пара RTX 4090 с расширенной до 48 ГБ памятью — это другой класс: 96 ГБ на две карты и максимум скорости в один поток.

Гарантии и условия

Покупаете без риска

Проверяем товар при вас, работаем официально и принимаем возврат.

Возврат и обмен 14 дней

Не подошло — вернём деньги или обменяем в течение 14 дней после получения.

Тест перед покупкой

Проверяем работоспособность модуля при вас или по видеосвязи до оплаты.

Официально, ИП и договор

Оплата на счёт ИП или наличными, чек и договор. Никакой серой схемы.

Доставка СДЭК по РФ

Отправляем по всей России, бережная упаковка. Самовывоз в Москве.

Отзывы

Что говорят покупатели

Реальные отзывы клиентов о покупке.

С
Сергей
★★★★★

Отличный сервер для задач машинного обучения, кручу модели на 70B. Купил — и радуюсь каждый день, хотя поначалу сомневался из-за цены.

А
Александр
★★★★★

Купил у ребят сервер на 128 ГБ, залил модель 120B — всё отлично работает. Спасибо!

Н
Николай
★★★★★

Искали локальный ИИ-сервер для адвокатской конторы — с публичными нейросетями работать не имеем права из-за конфиденциальности. Ребята помогли с настройкой, теперь всё работает идеально.

Комплектация

Варианты и цены

Объявление активно — забрать можно сразу.

Базовый

64 ГБ VRAM

4× V100 SXM2 · 16 ГБ HBM2 каждая
170 000 ₽
  • 4× Tesla V100 SXM2 (16 ГБ)
  • NVLink 2.0 · единая мостовая плата
  • Хост-карта OLDMONSTER + кабели SFF-8643
  • Корпус, охлаждение, БП под 1200 Вт
  • Подключение через 1 слот PCIe x16
Оставить заявку
Максимум памяти

128 ГБ VRAM

4× V100 SXM2 · 32 ГБ HBM2 каждая
340 000 ₽
  • 4× Tesla V100 SXM2 (32 ГБ)
  • NVLink 2.0 · единая мостовая плата
  • Хост-карта OLDMONSTER + кабели SFF-8643
  • Корпус, охлаждение, БП под 1200 Вт
  • Общий пул 128 ГБ под модели 50B+
Оставить заявку

Оплата: наличные в офисе или на счёт ИП (без НДС) +7%.

Заявка

Забрать модуль

Оставьте контакты — вернёмся с подтверждением наличия, ответим по характеристикам и согласуем оплату/доставку.

  • ✓ Ответим на технические вопросы (питание, охлаждение, драйверы)
  • ✓ Поможем с подбором платформы под модуль
  • ✓ Наличие подтверждаем перед оплатой
Или позвоните прямо сейчас: +7 903 568-83-88

Нажимая кнопку, вы соглашаетесь на обработку контактных данных для связи по заявке.

✓ Заявка принята

Спасибо! Мы свяжемся с вами по указанному телефону в ближайшее время.

Частые вопросы

Сколько стоит сервер 4× Tesla V100?

Базовая сборка (64 ГБ, 4×16 ГБ HBM2) — от 170 000 ₽, версия с максимумом памяти (128 ГБ, 4×32 ГБ) — 340 000 ₽. Оплата на ИП или наличными, доставка по РФ, самовывоз в Москве.

Какие модели тянет 4× V100 и с какой скоростью?

До 120 млрд параметров. На модели уровня 120B — около 45 токенов/с в один поток и до 433 токенов/с при 16 параллельных запросах (замер через vLLM). Скорость почти не падает даже на контексте 100 000 токенов.

Нужен ли NVLink для инференса LLM?

Для генерации ответов скорость определяет пропускная способность памяти, а не связь между картами. При этом версия V100 SXM2 в нашей сборке идёт с NVLink 2.0, что помогает и на обучении.

Хватит ли 4× Tesla V100 для модели 70B?

Да. 128 ГБ HBM2 хватает для квантованных моделей вплоть до 120B, а 70B помещается с большим запасом под контекст.

Как организовать питание для Tesla V100 в серверном корпусе?

Каждый модуль V100 SXM2 потребляет до 300 Вт, то есть четыре карты дают 1200 Вт только на GPU. Под такую сборку нужен блок питания от 1600 Вт с запасом на процессоры и диски. Питание подаётся не на карты, а на мостовую плату, которая распределяет его по модулям.

Какие требования к материнской плате и корпусу для 4× Tesla V100 SXM2?

Мостовая плата подключается к материнской одним разъёмом PCIe x16, поэтому подойдёт любая плата с одним свободным слотом. Критичны два других пункта: блок питания от 1600 Вт и корпус со сквозным продувом, так как радиаторы Tesla пассивные и своих вентиляторов не имеют.

Какую модель оптимально запустить на четырёх Tesla V100 в NVLink?

На 128 ГБ видеопамяти комфортно идут модели до 70 миллиардов параметров в квантовании AWQ — это около 40 токенов в секунду в один поток. Модели формата MoE на 120B тоже помещаются и работают быстрее плотных за счёт меньшего числа активных параметров.

Работает ли Tesla V100 в Windows и в виртуализации?

Наши сборки поставляются настроенными под Linux, где вся связка драйверов и движков инференса работает штатно. Под Windows и в средах виртуализации вроде Proxmox карты определяются, но настройка тензорного параллелизма сложнее и требует отдельной проработки.

Наши замеры скорости и конфиги vLLM открыты на GitHub →

Как мы это проверяем

Разборы с замерами на том же железе, что идёт в сборках.

Сборка сервера на Tesla V100: что нужно кроме видеокарт → Tesla V100 SXM2 и NVLink: как подключаются 4 карты → GigaChat локально: наши замеры на Tesla V100 → Какие движки LLM работают на Tesla V100 → Какие кванты LLM работают на Tesla V100 → Tesla V100 vs A100: реальные тесты в токенах/с →
×