数据中心RoCE组网实战 · 课程目录

📚 共30章 · 30个实战文件 ⚡ 从物理层到综合实战 🎯 友好色系

01RoCE技术概述

RDMA技术背景 · RoCE v1/v2协议演进 · RoCE vs InfiniBand vs iWARP对比 · AI/存储应用价值

02RoCE物理层基础

25G/100G/400G以太网标准 · FEC原理与配置 · 802.3x Pause vs PFC · 光模块与线缆选型

03RoCE网络核心组件

交换机选型(NVIDIA/华为/Arista) · 智能网卡ConnectX/BlueField · 固件与驱动配置

04RoCE网络架构设计

Spine-Leaf拓扑 · 无阻塞带宽计算 · 万卡级组网 · NVMe-oF融合设计

05RoCE流控机制(PFC)

优先级队列原理 · 死锁与预防 · Watchdog配置 · 风暴检测 · ECN协同

06RoCE拥塞控制(ECN)

ECN标记与反馈 · DCQCN算法 · DCTCP对比 · 阈值调优 · 拥塞流隔离

07RoCE网络QoS配置

802.1p优先级映射 · 整形与限速 · 混合部署策略 · QoS模板设计

08MTU与Jumbo Frame

MTU对性能影响 · Jumbo Frame配置 · IP分片损耗 · 端到端一致性检查

09VLAN与路由

VLAN划分与隔离 · RoCE over L3路由 · 跨子网通信 · VXLAN叠加网络

10多路径(ECMP)

哈希算法选择 · 对称/非对称哈希 · 负载不均排查 · 动态负载均衡DLB

11监控与遥测

INT/sFlow/NetFlow · 性能计数器 · perftest/ibdiagnet · Grafana面板

ib_write_bw/qperf · CPU卸载 · NUMA亲和性 · 中断合并调优

PFC风暴定位 · ECN异常 · 链路误码率BER · 丢包定位方法论

ACL · IPsec over RoCE · 租户隔离 · 安全基线模板

15AI训练场景

NCCL集成 · AllReduce优化 · 梯度同步延迟 · 最佳实践

16分布式存储场景

NVMe-oF配置 · FIO+SPDK · 延迟敏感度 · Ceph/GPFS实践

MPI配置 · 通信模式适配 · InfiniBand迁移 · 性能验证

18自动化部署

Ansible配置交换机 · Python批量配置 · pyperf测试 · CI/CD集成

19版本升级与兼容性

固件升级回退 · 交换机OS升级 · 协议兼容性矩阵 · 多厂商互操作

带宽趋势预测 · 端口密度功耗 · 光模块生命周期 · TCO分析

21高可用设计

多平面冗余 · LAG/MLAG · Graceful Restart · 故障切换优化

22数据中心互联(DCI)

RoCE over WAN · 长距离优化 · PFC over DCI · 误码控制

动态端口节能EEE · 智能风扇 · 功耗模型 · 绿色设计

24测试与验收

RFC 2544/2889 · 一致性测试套件 · 验收用例 · 报告模板

25案例实战(一) 金融

低延迟交易RoCE · 证券组网 · 延迟优化实战

26案例实战(二) 互联网AI

AI训练集群RoCE · 万卡组网 · 大规模运维

27案例实战(三) 运营商

NFV over RoCE · 5G核心网组网 · 电信级可靠性

28案例实战(四) 超算

超算中心RoCE · HPC存储组网 · 跨洲际互联

RoCE v3展望 · 800G/1.6T以太网 · AI原生网络 · SONiC与RoCE

30综合实战项目

从零搭建测试环境 · 端到端配置 · 性能基准测试 · 故障模拟恢复