Сетевой адаптер Mellanox ConnectX-5 Ex EN MCX516A-CDAT — двухпортовый 100GbE адаптер на шине PCI Express 4.0 x16, предназначенный для высокопроизводительных вычислений (HPC), облачных инфраструктур и дата-центров. Оснащён парой портов QSFP28 (100 Гбит/с каждый), чипом ConnectX-5 Ex EN и поддерживает современные протоколы RDMA (RoCE v1/v2), GPUDirect, VXLAN, Geneve и NVMe-over-Fabric. Обеспечивает сверхнизкую задержку (менее 0,6 мкс) и пропускную способность до 200 Гбит/с в сумме. Форм-фактор FHHL (полувысотная, половинной длины) позволяет устанавливать адаптер в серверы 1U.
Ультравысокая производительность и низкая задержка
Адаптер построен на фирменном ASIC ConnectX-5 Ex EN, который аппаратно обрабатывает сетевые протоколы без нагрузки на CPU. Технологии RoCE и GPUDirect позволяют эффективно передавать данные между GPU и ускорителями, что критично для AI/ML задач.
Два порта 100GbE (QSFP28)
- Скорость 100 Гбит/с на порт — суммарная пропускная способность 200 Гбит/с.
- Поддержка любых QSFP28 модулей: оптика (SR4, LR4, CWDM4) и прямые медные кабели (DAC) длиной до 7 м.
- Разделение портов — возможность разбить порт 100GbE на 4x25GbE (с поддержкой одного кабеля breakout).
Интерфейс PCI Express 4.0 x16
Шина PCIe 4.0 обеспечивает до 256 Гбит/с в обе стороны, полностью раскрывая потенциал двух портов 100GbE. Адаптер совместим с PCIe 3.0 (работает на скорости 8 GT/s, без потери функциональности), но для максимальной производительности требуется слот PCIe 4.0.
Виртуализация и управление трафиком
Адаптер поддерживает технологии для облачных сред и виртуализированных инфраструктур.
Технологии RDMA и offload
- RoCE v1/v2 — удалённый прямой доступ к памяти по Ethernet.
- VXLAN, Geneve, NVGRE — аппаратная инкапсуляция туннелей.
- NVMe-over-TCP и NVMe-over-Fabric — ускорение доступа к NVMe-хранилищам.
Виртуализация (SR-IOV)
- До 512 виртуальных функций (VF) — передача управления трафиком ВМ напрямую.
- QoS — приоритезация трафика по очереди TC.
- Управление полосой пропускания — ограничение скорости для каждого VF.
Безопасность и контроль доступа
- Secure Firmware Update — только подписанные образы прошивки.
- UEFI PXE Boot — загрузка по сети с поддержкой Secure Boot.
- 802.1Qbg/802.1Qbb — поддержка DCB для конвергентных сетей.
Совместимое оборудование и аксессуары
Для полноценной работы рекомендуются сертифицированные модули QSFP28 и кабели.
| Тип | Рекомендуемые модели / спецификации | Примечание |
|---|---|---|
| Оптические модули 100G QSFP28 | Mellanox MMS1C00-CM (SR4), MMS1C50-CM (CWDM4), совместимые FS.com, Finisar | До 100 м (SR4) или 2 км (CWDM4) |
| Медный прямой кабель DAC 100G | Mellanox MCP1600-xxx, QSFP28-H25G-CUxx, 1-7 м | Для подключения на короткие расстояния |
| Кабель breakout QSFP28 -> 4x25G | MCP2M10-xxx, QSFP28-4SFP28-CUxx | Разделение порта 100G на четыре 25G |
| Платформы (серверы) | Свободный слот PCIe 4.0 x16 (физически x16 или x8); высота планки FHHL | Проверьте высоту: низкопрофильные держатели в комплекте |
| Системы хранения | NVMe-over-Fabric, All-Flash массивы с поддержкой RoCE | Для построения высокоскоростного SAN |
Аналоги Mellanox ConnectX-5 Ex EN MCX516A-CDAT
Для сравнения или альтернативы рассмотрите следующие модели с характеристиками 2x100GbE и PCIe 4.0.
| Производитель | Модель | Ключевые отличия / сходство |
|---|---|---|
| Mellanox (NVIDIA) | ConnectX-6 Dx EN MCX623106AN-CDAT | 2x100GbE, PCIe 4.0, повышенная скорость пакетов, более мощные offload-функции, выше цена |
| Mellanox (NVIDIA) | ConnectX-5 Ex EN MCX515A-CDAT (однопортовый) | Те же технологии, но только один порт 100GbE – дешевле, если нужен один канал |
| Intel | E810-XXVDA2 (100GbE) | 2x100GbE, PCIe 4.0, поддержка ADQ, менее глубокая поддержка RoCE и GPUDirect по сравнению с Mellanox |
| Broadcom | NetXtreme-E BCM57508 (2x100G) | 2x100GbE, PCIe 4.0, поддержка RoCE, TrueFlow, но отстает по производительности в HPC |
| QLogic / Marvell | FastLinQ QL41300 (2x100G) | 2x100GbE, PCIe 4.0, iSCSI, FCoE, меньше гибкости в VXLAN/Geneve |
Рекомендация: Для AI/ML и HPC кластеров предпочтителен ConnectX-5 Ex EN или ConnectX-6. Для облачных сред (SDN, VXLAN) ConnectX-5 также является эффективным выбором.
Кому подойдёт Mellanox ConnectX-5 Ex EN MCX516A-CDAT
Рекомендуется, если вам нужно:
- Построить кластер HPC с высокой пропускной способностью и низкой задержкой.
- Ускорить передачу данных между GPU через GPUDirect/RoCE.
- Реализовать NVMe-over-Fabric для высокопроизводительного хранения.
- Использовать виртуализированные среды с SR-IOV и аппаратным offload.
- Организовать магистральные каналы 100GbE между коммутаторами и серверами.
Вероятно, не подойдёт, если:
- Требуются порты 25GbE или 10GbE – есть более дешёвые адаптеры (ConnectX-4 Lx, Intel X710).
- Используется устаревший сервер без PCIe 4.0 и слот x16 занят.
- Не используются RDMA или GPUDirect – достаточно обычного 100GbE.
- Бюджет ограничен – стоит рассмотреть однопортовую версию или Intel E810.
Конструкция и условия эксплуатации
Форм-фактор FHHL
Размеры 167.5 x 68.9 мм (полувысотная, половинной длины). В комплекте низкопрофильный держатель для установки в 1U-серверы. Охлаждение пассивное (радиатор), требует продува корпуса сервера.
Диапазон рабочих температур
- Эксплуатация: 0°C до +55°C (при скорости воздуха > 1.5 м/с)
- Хранение: −40°C до +70°C
- Влажность: 5%–95% (без конденсата) при работе, до 90% при хранении
Адаптер предназначен для установки в серверные стойки с активным охлаждением.
Технические характеристики
| Артикул | MCX516A-CDAT |
| Модель | Mellanox ConnectX-5 Ex EN |
| Интерфейс подключения | PCIe 4.0 x16 (обратно совместим с PCIe 3.0) |
| Количество портов | 2 |
| Тип портов | QSFP28 (100GbE) |
| Скорость порта | 100 Гбит/с (100GBASE-SR4/LR4, 100GBASE-CR4) |
| Суммарная пропускная способность | 200 Гбит/с (полный дуплекс) |
| Чипсет (ASIC) | ConnectX-5 Ex EN |
| Поддержка RDMA | RoCE v1/v2 |
| GPUDirect | Да (P2P, RDMA) |
| Виртуализация | SR-IOV (до 512 VF), Multi‑Function |
| Туннелирование | VXLAN, Geneve, NVGRE (аппаратная инкапсуляция) |
| NVMe-over-Fabric | TCP и RDMA |
| Протоколы управления | PXE (UEFI), iSCSI, FCoE (опционально), DCB |
| Форм-фактор | FHHL (полувысотный, половинной длины), низкопрофильная планка в комплекте |
| Размеры | 167.5 x 68.9 мм |
| Охлаждение | Пассивное (радиатор) |
| Управление питанием | ASPM, динамическое снижение частоты |
| Энергопотребление (типовое) | 14 Вт (без модулей) |
| Поддержка ОС | Windows Server, Linux (RHEL, Ubuntu, SLES), VMware ESXi |
| Поддержка стандартов | IEEE 802.3ba, 802.3bj, 802.3bm, 802.1Qbg, 802.1Qbb, RoCE |
| Гарантия | Ограниченная пожизненная (Lifetime) от NVIDIA/Mellanox |
Часто задаваемые вопросы
Для каких задач оптимален Mellanox ConnectX-5 Ex EN?
Для HPC, AI/ML кластеров, высокоскоростных хранилищ (NVMe-oF), центров обработки данных с SDN, виртуализации с производительным сетевым доступом.
Можно ли использовать адаптер в сервере со слотом PCIe 3.0?
Да, обратная совместимость есть. Адаптер будет работать в режиме PCIe 3.0 x16, но пропускная способность шины может ограничить одновременную скорость двух портов (до ~120 Гбит/с вместо 200). Для полной производительности нужен слот PCIe 4.0.
Какие кабели подходят для портов QSFP28?
Оптические модули SR4 (до 100 м), LR4 (до 2 км), CWDM4 (до 2 км), медные DAC (до 7 м) и активные оптические кабели (AOC).
Поддерживает ли адаптер функцию разделения порта (Breakout)?
Да. Каждый порт 100GbE можно разделить на четыре независимых 25GbE канала. Требуется соответствующий breakout-кабель QSFP28-4xSFP28.
Каковы типовые задержки адаптера?
Менее 0,6 мкс при RDMA (RoCE) и менее 1 мкс при обычном TCP. Это достигается аппаратным offload и прямым доступом к GPU.
Как обновить прошивку?
Через утилиту Mellanox Firmware Tools (mlxconfig, flint) или через Web-интерфейс (MFT). Прошивку скачивают с портала NVIDIA.
Есть ли поддержка RDMA для Windows?
Да, адаптер поддерживается драйверами для Windows Server 2016/2019/2022 с активацией функций RDMA через PowerShell.
Требуется ли дополнительное охлаждение?
При установке в стандартный сервер с продувом (даже тихие модели) достаточно пассивного радиатора. В средах с ограниченным потоком воздуха рекомендуется размещать рядом с передними вентиляторами.
Совместим ли он с VMware vSphere?
Да, драйверы входят в состав VIB (vmklinux, nmlx5_core) для ESXi 6.7 и новее. Поддерживается SR-IOV и NetQueue.
Где применяется технология GPUDirect?
При обучении нейросетей, визуализации, обработке больших данных, когда GPU обмениваются данными по сети напрямую без копирования в CPU.
Основные характеристики
Нет вопросов об этом товаре.
