英伟达IB产品线全景：四大核心组件
做InfiniBand网络这么多年，我经常被问到同一个问题：「IB网络到底需要哪些硬件？」
其实答案很清晰。一套完整的IB系统，主要由四类设备构成：网卡、交换机、DPU、线缆光模块。今天我就把这四块掰开揉碎了讲清楚。
核心观点：这四类设备不是孤立存在的。你升级固件时，必须考虑它们之间的兼容性。我见过太多人只升级网卡，忘了交换机，结果整个集群挂了。
1. ConnectX系列网卡：IB网络的「入口」
ConnectX系列是英伟达最经典的网卡产品线。从ConnectX-4到ConnectX-7，每一代都在性能上翻倍。
我个人习惯把网卡比作「网络的大门」。数据要进出服务器，必须经过它。所以网卡固件出问题，整台机器就失联了。
| 型号 | 接口速率 | 典型场景 |
|---|---|---|
| ConnectX-4 | 100Gb/s (EDR) | 老旧集群、低成本方案 |
| ConnectX-5 | 200Gb/s (HDR) | 主流HPC、AI训练 |
| ConnectX-6 | 200Gb/s (HDR) / 400Gb/s (NDR) | 高性能计算、存储网络 |
| ConnectX-7 | 400Gb/s (NDR) | 最新AI集群、超大规模部署 |
我的经验：ConnectX-5是目前存量最大的网卡。如果你在升级固件，优先查它的兼容性矩阵。ConnectX-7虽然快，但固件坑也多，我踩过两次雷。
2. Quantum系列交换机：网络的「心脏」
交换机负责把数据从一个节点转发到另一个节点。Quantum系列是英伟达的IB交换机主力。
说白了，交换机就是IB网络的「十字路口」。数据包怎么走、走多快，全看交换机的固件怎么调度。
Quantum系列有几个关键型号：
- Quantum QM8700：40端口HDR交换机，单机200Gb/s
- Quantum QM9700：64端口NDR交换机，单机400Gb/s
- Quantum QM9790：带Shield技术的NDR交换机，支持自适应路由
注意：交换机固件升级必须按步骤来。我曾经跳过中间版本直接升大版本，结果整个子网瘫痪了。记住：先读Release Notes，再动手。
3. BlueField DPU：不只是网卡
BlueField DPU是英伟达的「杀手锏」。它把网卡、CPU、加速器集成在一起。
你想想看，传统网卡只负责收发数据。但DPU能跑操作系统、做安全隔离、加速存储。我最早接触DPU时，觉得这东西太复杂了。后来发现，它其实是解决数据中心「CPU过载」问题的关键。
BlueField系列主要分两代：
- BlueField-2：基于ConnectX-6，支持HDR 200Gb/s
- BlueField-3：基于ConnectX-7，支持NDR 400Gb/s，内置16个ARM核心
固件升级提醒：DPU的固件包含三个部分：网卡固件、ARM固件、加速器固件。升级时必须按顺序来，否则DPU会变砖。我见过有人只升了网卡固件，ARM固件没动，结果DPU启动不了。
4. LinkX线缆与光模块：网络的「血管」
线缆和光模块容易被忽视。但说实话，很多网络故障都是它们引起的。
LinkX是英伟达自家的线缆和光模块品牌。包括：
- 直连铜缆（DAC）：短距离（3-5米），成本低，功耗小
- 有源光缆（AOC）：中距离（10-100米），抗干扰强
- 光模块（QSFP/OSFP）：长距离（100米+），需要配合光纤使用
嗯，这里要注意：线缆和光模块也有固件。虽然它们不像网卡那样频繁升级，但兼容性问题很常见。我遇到过最离谱的一次，是某批次光模块固件版本太低，导致交换机端口反复重启。
| 线缆类型 | 最大速率 | 典型距离 | 固件升级频率 |
|---|---|---|---|
| DAC铜缆 | 400Gb/s (NDR) | 3米 | 极少 |
| AOC有源光缆 | 400Gb/s (NDR) | 30米 | 偶尔 |
| 光模块 | 400Gb/s (NDR) | 100米+ | 按需 |
避坑指南：我曾经因为用了第三方光模块，导致交换机报CRC错误。后来全部换成LinkX原厂线缆，问题消失。不是说我迷信原厂，而是兼容性测试太费时间了。
总结一下这四者的关系
网卡负责「接入」，交换机负责「转发」，DPU负责「卸载」，线缆负责「连接」。四者缺一不可。
升级固件时，我的建议是：先查兼容性矩阵，再定升级顺序。通常先升交换机，再升网卡/DPU，最后检查线缆固件。
好了，这一章就到这里。下一章我会讲固件版本号的命名规则——别看它简单，很多人栽在这上面。