破解RDMA网络“黑盒”：轻量化会话追踪工具

随着高性能计算和分布式存储的快速发展，基于RoCEv2的RDMA网络技术已在人工智能训练与推理、NVMe-oF存储、高性能数据库等场景中实现规模化部署。然而，在享受其低延迟、高吞吐优势的同时，运维人员却面临着一个普遍难题：RDMA通信层如同一个“黑盒”，业务侧难以透视其在网络中的真实路径与状态，一旦出现性能下降、拥塞或时延抖动等问题，故障定位往往耗时费力、成本高昂。

RDMA运维之痛：从“看不见”到“难定位”

当前，尽管RDMA在协议栈层面具备源/目的IP、QP（Queue Pair）、通信ID（CID）等多个维度的信息标识，但运维工具往往只能获取到离散的IP与QPN信息，无法将会话状态与网络路径关联。常见的交换机观测手段，如端口计数器、PFC/ECN统计、抓包镜像等，或只能反映局部端口状态，或需处理海量数据且依赖人工分析，难以直接对应到具体的RDMA连接。而基于INT或Telemetry的硬件方案又面临芯片支持、现网改造等诸多门槛。

在此背景下，可视化和会话级追踪成为RDMA网络运维的迫切需求。

RST工具链：以CM报文为线索，还原RDMA通信全貌

EasyRoCE Toolkit中的RST（RDMA Session Tracer），正是为解决上述痛点而生。该工具通过无侵入、轻量化的方式，聚焦于RDMA建连阶段的控制面报文——CM（Communication Management）报文，从中提取QPN、CID等关键信息，构建RDMA会话的生命周期，并关联到具体交换设备与端口，最终实现跨设备的路径还原。

CM协议（Communication Management Protocol，通信管理协议），在本文语境下指的是一种建立于 Infiniband/RoCE 协议基础之上的建链方式，它有一套专属的报文格式、交互流程和用户接口。
CM 协议通过报文的多次往返来建立连接，类似于 TCP 协议的握手，同时也规定了断链的方式。
【参考：Savir，https://zhuanlan.zhihu.com/p/494826608】

核心组成：RFT + RPT 双模块协同

• RFT（RDMA Flow Table）：以容器形式部署于每台交换机，负责捕获CM报文、解析会话状态、维护流表，并通过4791端口对外提供数据。
• RPT（RDMA Path Table）：运行于独立控制器，汇聚全网流表信息，进行实时路径计算与可视化呈现，最终通过Grafana界面向用户开放。

部署与使用：一键可视，开箱即用

用户可通过EasyRoCE-AID自动获取交换机信息，分别安装 RST 下的子模块（RFT和FPT）后，即可在Grafana面板中：

• 查看所有交换机的RFT状态并控制启停；

RST 工具首页

RST 工具首页可看到当前组网内的所有业务交换机的列表和功能指示开关，直观查看和修改交换机上 RFT 容器的启用和停止状态。

• 查看单设备的RDMA流表与会话追踪；

RDMA流表信息页

全局视角查看RDMA会话的完整转发路径。

当全网设备都开启 RFT 功能，点击 RST 工具首页左上角的流量路径按钮，即可进入 RDMA 流量路径表信息页，由此看到全网的 RMDA 通信会话的转发路径。

RDMA流量路径表信息页

不止于可视：RST的运维价值与行业意义

RST工具的推出，标志着RDMA网络运维从“盲调”走向“可视”，从“被动响应”转向“主动洞察”。它不仅降低了故障定位的时间与人力成本，也为网络性能优化、容量规划、拓扑调优等提供了数据支撑。
未来，随着AI与存储网络进一步向RDMA化演进，具备会话感知能力的网络可视化工具有望成为智能运维体系的核心组件。星融元通过RST工具链，不仅解决了当前运维中的实际难题，也为构建下一代可观测、可诊断、可自愈的高性能网络奠定了基础。