Сетевая карта Mellanox MCX623106AS-CDAT Ethernet 100Gb 2-port QSFP56 Adapter for HPE (P25960-B21)

етевой адаптер Mellanox MCX623106AS-CDAT Ethernet 100Gb 2-port QSFP56 Adapter for HPE (P25960-B21).

Подробные технические характеристики

- Производитель: HPE (Hewlett Packard Enterprise)
- Модель: Mellanox MCX623106AS-CDAT Ethernet 100Gb 2-port QSFP56 Adapter (для HPE)
- Идентификатор HPE: P25960-B21
- Тип адаптера: PCI Express (PCIe) сетевой адаптер
- Интерфейс шины: PCI Express v4.0 x16
- Контроллер: NVIDIA ConnectX-6 VPI (MCX623106AS-CDAT обозначает конкретную модель адаптера на базе этого контроллера NVIDIA Mellanox ConnectX-6 VPI) VPI означает "Virtual Protocol Interconnect" - поддержка как Ethernet, так и InfiniBand. Однако в данном случае (для HPE P25960-B21) он сконфигурирован как Ethernet адаптер.
- Порты: 2 порта 100 Gigabit Ethernet
- Тип подключения: QSFP56 (Quad Small Form-factor Pluggable 56)
- Скорость передачи данных:
- 50 Гбит/с (полный дуплекс) на порт (как опция, при подключении отдельных кабелей/трансиверов)
- 100 Гбит/с (полный дуплекс) на порт

- Поддержка трансиверов: Поддерживает различные подключаемые QSFP56/QSFP28 модули, включая:
- QSFP56 SR4/LR4 для 100GbE оптоволокна (PAM4)
- QSFP56 Direct Attach Copper (DAC) кабели для 100GbE (PAM4)
- QSFP28 SR4/LR4 для 100GbE оптоволокна (NRZ)
- QSFP28 Direct Attach Copper (DAC) кабели для 100GbE (NRZ)
- QSFP28 для 4x25GbE breakout (NRZ)
- QSFP+ для 4x10GbE breakout (NRZ)

- Поддержка Jumbo Frames: Да, до 9,600 байт
- Поддержка разгрузки TCP/UDP/IP Checksum: Да
- Поддержка Receive Side Scaling (RSS): Да, для распределения сетевого трафика между несколькими ядрами процессора
- Поддержка Flow Control (802.3x): Да
- Поддержка тегов VLAN (802.1Q): Да
- Расширенные функции и разгрузки:
- Virtual Protocol Interconnect (VPI): Хотя данный адаптер P25960-B21 поставляется как Ethernet-адаптер, контроллер ConnectX-6 VPI по своей природе способен работать как InfiniBand HCA (Host Channel Adapter) или Ethernet NIC.
- RDMA over Converged Ethernet (RoCE) v2: Аппаратная поддержка RDMA через Ethernet, жизненно важная для высокопроизводительных приложений, снижающая задержку и нагрузку на CPU.
- Precision Time Protocol (PTP) / IEEE 1588v2: Высокоточная синхронизация времени на аппаратном уровне.
- VirtIO-Net: Поддержка для виртуализированных сред.
- SR-IOV (Single Root I/O Virtualization): Позволяет виртуальным машинам получать прямой доступ к сетевому адаптеру для повышения производительности ввода-вывода.
- Advanced DCB (Data Center Bridging): Поддержка стандартов IEEE 802.1Qaz (ETS), 802.1Qbb (PFC) для гарантированного качества обслуживания (QoS) и предотвращения потерь пакетов, что критично для RoCE и FCoE.
- Storage Offloads:
- NVMe over Fabrics (NVMe-oF) с RoCE
- iSER (iSCSI Extensions for RDMA)
- Block-level transport

- Security / Trust:
- Hardware Root of Trust
- Secure firmware update
- IPsec/TLS offload (для некоторых конфигураций ConnectX-6 VPI)

- Overlay Networks Offloads: Разгрузка инкапсуляции/декапсуляции для VXLAN, NVGRE, Geneve, GRE, снижающая нагрузку на CPU в виртуализированных средах.
- ConnectX-6 VPI Engine: Включает продвинутые движки для обработки I/O, Packet Pacing, GPUDirect RDMA, Adaptive Routing (в режиме InfiniBand), SHIELD (Self-Healing InfiniBand).
- Collectives Offloads: Аппаратная разгрузка коллективных операций (MPI), что является уникальной чертой, особенно полезной для HPC и AI/ML.
- Energy Efficient Ethernet (EEE) 802.3az: Снижение энергопотребления.
- Secure Boot and Measurement: Для повышения безопасности системы.

- Поддержка сетевых стандартов:
- IEEE 802.3by (25 Gigabit Ethernet) - для режима breakout
- IEEE 802.3cd (50 Gigabit Ethernet, 100 Gigabit Ethernet)
- IEEE 802.1Q (VLAN Tagging)
- IEEE 802.3x (Flow Control)
- IEEE 802.1p (Priority Queuing)
- IEEE 802.3ad (Link Aggregation Control Protocol)
- IEEE 802.1Qbb (Priority-based Flow Control) - DCB
- IEEE 802.1Qaz (Enhanced Transmission Selection) - DCB

- Индикаторы LED: Link/Activity (состояние соединения/активности) и Speed (скорость) для каждого порта
- Профилирование: Поставляется с полноразмерным кронштейном (стандартная высота).
- Драйверы: Поддержка широкого спектра операционных систем, включая Microsoft Windows Server, Linux (RHEL, SLES, Ubuntu), VMware ESXi, freeBSD и др.
- Потребляемая мощность: Типовая до 25-35 Вт (зависит от нагрузки, скорости портов и подключенных QSFP56 модулей, а также от функций разгрузки).

Дополнительная информация о производительности

Адаптер ConnectX-6 VPI представляет собой вершину технологий сетевых адаптеров, разработанных для самых требовательных центров обработки данных, HPC, AI/ML и облачных инфраструктур.

- PCIe 4.0 x16: Обеспечивает колоссальную пропускную способность до 256 Гбит/с в одном направлении (512 Гбит/с в полнодуплексном режиме). Это более чем достаточно для одновременной работы двух портов 100GbE (общая пропускная способность до 200 Гбит/с) без какого-либо узкого места на шине, даже при использовании всех аппаратных разгрузок. Это критически важно для передачи больших объемов данных на высоких скоростях.
- RDMA over Converged Ethernet (RoCE) v2: На 100 Гбит/с RoCE становится ещё более важным. Оно позволяет передавать гигантские объемы данных с минимальной задержкой (субмикросекунды) и нулевой нагрузкой на CPU. Это фундаментальная технология для:
- NVMe-oF (NVMe over Fabrics): Передача данных NVMe накопителей через сеть с производительностью, сравнимой с локально подключенными дисками.
- Распределенные вычисления HPC и AI/ML: Многочисленные GPU, работающие совместно, требуют экстремальной пропускной способности и низкой задержки для обмена данными и синхронизации. Аппаратные разгрузки коллективных операций (Collectives Offloads) на ConnectX-6 VPI дополнительно ускоряют этот процесс.
- Высокопроизводительные базы данных: Обеспечивает быстрый доступ к данным с удаленных хранилищ.

- QSFP56: Использует модуляцию PAM4 для достижения 50 Гбит/с на одной полосе, что позволяет получить 100 Гбит/с по 2 полосам или 200 Гбит/с по 4 полосам. Это более эффективный способ передачи данных по сравнению с предыдущим стандартом QSFP28 (NRZ).
- Overlay Networks Offloads: Разгрузка VXLAN, NVGRE, Geneve на такой скорости (100GbE) абсолютно необходима для эффективной работы в масштабируемых виртуализированных и программно-определяемых сетях (SDN), где интенсивное использование CPU для инкапсуляции/декапсуляции без этой разгрузки стало бы серьезным узким местом.
- PTP/IEEE 1588v2: Высочайший уровень синхронизации времени, необходимый для распределенных систем, которым требуется когерентность и точность на микросекундном уровне.

Какие серверы HPE Gen11 совместимы с этим адаптером

Для использования Mellanox MCX623106AS-CDAT Ethernet 100Gb 2-port QSFP56 Adapter (P25960-B21) в полной мере необходимы серверы, поддерживающие PCIe 4.0 x16.

Совместимые серверы HPE ProLiant Gen11:

- HPE ProLiant DL360 Gen11
- HPE ProLiant DL380 Gen11
- Для других серверов HPE ProLiant Gen11 (например, DL320 Gen11, ML350 Gen11) необходимо убедиться, что они имеют доступные слоты PCIe 4.0 x16. Хотя адаптер может работать и в слоте x8, для максимальной производительности (2x100GbE) требуется x16.
- Также может использоваться в HPE ProLiant Synergy Compute Modules Gen11, если они поддерживают карты PCIe полной высоты/длины и имеют соответствующие слоты PCIe 4.0 x16.

Важное замечание: Работа в серверах PCIe 3.0 x16 возможна, но производительность будет ограничена. PCIe 3.0 x16 обеспечивает около 128 Гбит/с пропускной способности, что является узким местом ля двухпортового 100GbE адаптера (200 Гбит/с). Поэтому для раскрытия всего потенциала адаптера и достижения 100 Гбит/с на каждом порту, серверы HPE Gen11 с PCIe 4.0 x16 являются предпочтительными.

Размер и вес

- Форм-фактор: Стандартная полноразмерная карта PCIe (FHFL – Full Height, Full Length).
- Размеры (приблизительно):
- Длина: Около 16.7 см (6.6 дюйма)
- Высота: Около 11.2 см (4.4 дюйма)
- Ширина (толщина): Около 1.8-2.5 см (0.7-1.0 дюйма), часто с крупным радиатором.

- Вес (приблизительно): От 250 до 400 грамм (с учетом крупного радиатора).