基于标准 Ethernet 的开放 800G AI fabric

没有哪个基于通用芯片的以太网 NOS 是真正意义上的 AI 原生：没有一个会在交换机上推理 xCCL（NCCL / RCCL / oneCCL）集合通信或调度作业；那属于 NIC 和调度器。OcNOS-DC 实现了 2026 年 AI 工作负载所需的每一项 fabric 机制：无损 RoCEv2、针对 RDMA 集合通信流量模式调优的 DCQCN 缓存配置、亚毫秒级 DLB flowlet 重绑定、PFC 死锁看门狗、UEC 1.0 对齐，同时不涉足上层。所谓“AI 感知 fabric”通常只是指某家厂商将 NIC + 交换机 + 调度器作为一个锁定的 SKU 出售。

OcNOS-DC 负责 layer 1：lossless RDMA 传输、拥塞控制、自适应路由、死锁恢复、遥测。NIC 负责 layer 2（xCCL、RDMA verbs、packet spray、GPU-Direct 内存）；调度器负责 layer 3（作业放置、梯度同步窗口、租户隔离）。OcNOS-DC 将 gNMI 遥测数据流式上送至 layer 3，但绝不试图扮演调度器：这种分层使 NIC、GPU 与编排系统始终保持可替换。

Spectrum-X is a closed NVIDIA NIC + switch + software stack: excellent performance, single-vendor lock-in. Arista, Cisco, and Juniper run similar RoCEv2 features on locked hardware with proprietary licensing. Community SONiC is open but ships no AI-hardened defaults, watchdog, or SLA. DriveNets DDC is a proprietary cell fabric, not an Ethernet NOS. OcNOS-DC delivers the complete system, validated open switches plus OcNOS-DC plus support under one contract, and runs one NOS across both service-provider and data-center roles. It runs on Broadcom silicon with lossless RoCEv2 (PFC, ECN, sub-millisecond DLB with Reactive Path Rebalance), PFC deadlock recovery, UEC 1.0 fabric-profile alignment, and a 24/7 SLA, with no lock-in.

当 Ultra Ethernet NIC 到来时，您今天采购的交换机应当能够延续使用，而在 OcNOS-DC 上正是如此。您的 fabric 现在即可在生产环境中运行获得完整支持的 RoCEv2 加 DCQCN 加 DLB，OcNOS-DC 跟随 UEC 1.0 fabric profile，将每条流并行分散到每一条路径上，而非将其固定到单一 ECMP 哈希，因此您可在无需更换 NOS 或硬件的情况下迁移到 UEC NIC。OcNOS-DC 与 UEC 1.0 fabric profile 对齐；对齐并非认证声明。请参见 Ultra Ethernet 深度解析.

您的训练集合通信 AllReduce 和 AllGather 通过 RoCEv2 在 GPU 之间直接搬运数据，路径中不经过 CPU，而 RDMA 从不重传，因此单个丢失的报文就会让该操作在任务的每一块 GPU 上重新开始。这正是生产级 RoCEv2 需要真正无损架构（PFC 加 ECN）的原因，OcNOS-DC 随附针对 RDMA 集合通信流量调优的 RoCEv2 缓冲配置和 DCQCN 默认值，让您的团队无需从零构建这种无损行为。

三种机制：PFC 在缓冲区溢出前按优先级暂停流量；ECN 提前标记报文以让发送端减速；ETS 让 RDMA 流量优先于较低优先级流量。在此之上，按端口、按优先级的 deadlock watchdog 会检测暂停队列的循环，并在作业挂起前自动清空队列：过去这种故障模式曾迫使在作业中途对交换机进行电源重启。PFC over L3 在路由边界之间同样受支持。

在 AllReduce 过程中，当标准 ECMP 在整个生命周期内将每条大流固定绑定到单条上行时，最大的几条流会相互碰撞，同步则被卡在拥塞链路上等待。DLB 读取 ASIC 队列深度的实时遥测数据，在不到一毫秒内将 flowlet 重新绑定到负载更轻的路径，因此如今就能在本地跳恢复被浪费的吞吐量。GLB 已列入 OcNOS 7.x 路线图，将同样的理念扩展到整个 fabric：spine 将路径质量遥测数据回传给入口 leaf，使路由能够在数千 GPU 的大型集群中对完整的多跳路径进行评分。

OcNOS-DC 支持 400G 与 800G 的 leaf-spine fabric。 Tomahawk 5 spine 交换机（Edgecore AIS800-64D、UfiSpace S9321-64E）提供 51.2 Tbps / 64 × 800G； Tomahawk 4 leaves run 400G / 25.6 Tbps with on-chip buffering; Trident 4 covers smaller 100G/400G fabrics. Reference designs cover rail-only, rail-optimized, and 3-stage Clos topologies for large multi-thousand-GPU clusters: see the AI fabric 拓扑深度解析.

是的。DCBX 自动完成服务器到交换机的 RoCEv2 配置，ZTP（IPv4/IPv6）处理零接触上线，gNMI 通过 OpenConfig YANG 流式推送变更触发的遥测数据。PFC 暂停、ECN 标记、DCQCN 阈值和缓冲深度均为 gNMI 传感路径，可由 Prometheus、InfluxDB、Telegraf、Grafana 或任何 OpenTelemetry 管线消费。Ansible playbook 覆盖 Day-0 至 Day-2，Terraform provider 已列入路线图。IP Maestro 作为 OcNOS 的网元管理系统，通过 NETCONF 管理拓扑、故障、配置和软件镜像，并可从一个控制台管理大规模多站点设备群。

The fabric runs on validated Broadcom Tomahawk 4 and 5 switches from Edgecore and UfiSpace. The 800G spines (Edgecore AIS800-64D and UfiSpace S9321-64E, Tomahawk 5, 64 x 800G QSFP-DD800, 51.2 Tbps) break out to 400G, 200G, and 100G; the 400G leaf (Edgecore AS9736-64D, Tomahawk 4, 64 x 400G QSFP56-DD, 25.6 Tbps with on-chip buffering) breaks out to 100G and 25G. Optics have proven interoperability from multiple vendors, so contact us for the transceiver list for your build. The switch platforms are listed in the HCL.

一份 IP Infusion 合同即可同时涵盖 OcNOS-DC 软件与经过验证的交换机硬件，因此只需对接一个 TAC 和一份 SLA。支持服务分为多个等级：Standard 包含邮件 TAC、工作时间电话支持与硬件 RMA 协调，P1 响应时间为 8 小时；Premium 增加 24/7 客户支持门户，P1 响应时间为 2 小时；Enterprise 进一步提供 30 分钟 P1 响应，并配备客户成功经理。24/7 门户面向 Premium 与 Enterprise 等级提供。