RDMA高速网卡多端口总带宽统计
摘要：RDMA高速网卡多端口总带宽统计用于评估网卡在多端口并发通信场景下的整体传输能力，通过采集各端口的发送、接收速率及数据量，分别汇总发送总带宽和接收总带宽，并明确单向、双向统计口径，避免重复计数，统计时应统一采样周期，区分理论带宽与有效吞吐量，同时考虑协议开销、端口负载均衡及PCIe带宽限制，为性能测…
RDMA高速网卡多端口总带宽统计用于评估网卡在多端口并发通信场景下的整体传输能力，通过采集各端口的发送、接收速率及数据量，分别汇总发送总带宽和接收总带宽，并明确单向、双向统计口径，避免重复计数，统计时应统一采样周期，区分理论带宽与有效吞吐量，同时考虑协议开销、端口负载均衡及PCIe带宽限制，为性能测试、瓶颈定位和资源优化提供依据。
RDMA高速网卡多端口总带宽如何统计：硬件知识解读
RDMA高速网卡的多端口总带宽,不能只把端口标称速率相加，对服务器而言，至少需要区分端口理论带宽、实际收发吞吐量和应用有效吞吐量，三者分别反映链路能力、数据传输情况与业务获得的数据量，统计时必须统一方向、单位和时间窗口。
端口理论带宽可以按已启用且链路正常的端口速率求和,一张双端口网卡的两个端口均以100Gb/s运行，其单向理论总带宽为200Gb/s，若同时计算发送与接收，全双工收发合计的理论值为400Gb/s，但不能据此宣称单向传输达到400Gb/s。
实际吞吐量通常通过端口字节计数器的增量计算：带宽等于统计周期内新增字节数乘以八，再除以时间，多个端口应使用尽量同步的采样窗口，分别求出发送速率与接收速率后汇总，计数器复位、回绕或端口重连都可能造成异常值，应识别并排除。
统计RDMA流量时,还要确认计数器覆盖范围，普通操作系统网络接口统计不一定完整反映绕过内核数据路径的RDMA传输，应优先核对网卡驱动、厂商工具及RDMA端口计数器的说明，部分计数器并非以单字节为单位，直接代入公式可能产生倍数误差。
端口速率相加并不代表服务器一定能达到同等吞吐量,PCIe链路是重要约束，PCIe4.0×16在扣除编码开销后，每个方向约有31.5GB/s的理论传输能力，尚未扣除事务层等开销，双端口200Gb/s网卡的单向端口合计为50GB/s，持续传输可能受其限制。
除了PCIe代际和实际协商宽度,处理器与网卡的NUMA位置、内存带宽、队列配置以及交换机上联能力也会影响汇总结果，测试应记录网卡所在插槽、链路速率、消息大小、并发数量和传输方向，并明确测试的是读、写还是发送操作，便于复现与比较。
协议开销同样需要计入解释,端口线速包含的传输内容与应用有效载荷不同，因此应用报告的吞吐量通常低于按端口速率计算的上限，多端口分别连接独立网络时，还应检查测试任务是否真正覆盖全部端口，不能用单条连接的结果代表整卡能力。
最终报表宜列出各端口发送、接收及汇总值，并注明计数器来源和单位，收发合计仅用于描述双向负载，不应当作单向带宽，跨网卡或跨服务器比较时，也要保持统计口径一致。
