適用於 neocloud 與 GPU 雲端業者的網路
IP Infusion 提供 GPU 雲端賴以運作的網路:在經認證的交換器上執行 OcNOS-DC,涵蓋無損 GPU fabric、儲存網路、租戶前端網路與帶外管理,全部納入單一支援合約。
一台 GPU 伺服器,四個網路
GPU 雲端中的每台伺服器都連接四個網路:GPU 後端 fabric、儲存、租戶前端與管理。OcNOS-DC 可執行全部四個網路,因此一個團隊即可在整個雲端維運同一個軟體系列。
選擇一個網路,查看它承載的流量
GPU 後端。 GPU 集合通訊執行在獨立的路由 fabric 上。基於三層的 PFC 與 ECN 讓 RoCEv2 流量保持無損,動態負載平衡將 flowlet 移到負載較輕的上行鏈路。Tomahawk 5 交換器提供 64 × 800G。
儲存。 儲存流量擁有獨立的網路,並透過 PFC 與 ECN 保持無損。當儲存與 EVPN-VXLAN fabric 共用時,PFC 與 ECN 也可在受支援的交換器上基於 VXLAN 執行。
前端。 客戶透過前端網路存取其 GPU。在受支援的 Trident 3 與 Trident 4 交換器上,EVPN-VXLAN 為每個租戶提供專屬的 VRF 與 VNI,並支援 MAC 限制與 route-target 過濾。
管理。 帶外管理執行在 1G 交換器上,搭配管理 VRF 與零接觸配置,使管理流量與生產網路分離。
示意圖。
訓練與推論對網路的要求各不相同
Neocloud 兩者兼顧。訓練以穩定、同步的流量填滿少數幾個大型叢集。推論流量分散在眾多站點,並以突發方式到達。
| 網路所面對的 | 訓練AI 工廠 | 推論即時服務 |
|---|---|---|
| 分布 | 少數幾個大型 GPU 叢集 | 眾多區域與邊緣站點 |
| 流量 | 大批量、同步的 GPU 到 GPU 集合通訊 | 小而對延遲敏感的請求 |
| 負載特徵 | 長時間保持接近滿載的 GPU 使用率 | 突發且彈性,數秒內激增 |
| 網路必須做到 | 在持續頻寬下保持無損 | 低延遲,且每一層都備援 |
OcNOS-DC 在 GPU 雲端中執行哪些功能
各網路所依賴的功能,取自 OcNOS 功能矩陣。
| 能力 | 它的作用 | 適用範圍 |
|---|---|---|
| 基於三層的 PFC 與 ECN | 在路由 fabric 上實現無損 RoCEv2,並在流量類別之間執行 ETS | 所有 OcNOS-DC |
| 動態負載平衡 | 將 flowlet 移到負載較輕的上行鏈路 | 部分交換器 |
| PFC 死鎖偵測與恢復 | 偵測停滯的優先權佇列並將其恢復 | 部分交換器 |
| EVPN-VXLAN | 基於 VXLAN 的二層 EVPN,每個租戶一個 VRF 與多個 VNI | Trident 3 與 4 |
| 租戶限制 | 每租戶 MAC 限制與 route-target 過濾 | 部分交換器 |
| 基於 VXLAN 的 PFC 與 ECN | EVPN-VXLAN fabric 上的無損儲存流量 | 部分交換器 |
| MLAG 與 EVPN 多歸屬 | MLAG 採用 active/active 模式;EVPN 採用 single-active 或 port-active 模式 | 部分交換器 |
| 交換器內建相干光模組 | 站點之間的 400G 與 800G ZR 及 OpenZR+ 鏈路 | 部分交換器 |
| 管理 VRF 與 ZTP | 帶外管理與零接觸配置 | 所有 OcNOS-DC |
支援情況依交換器型號與授權而異。 請查閱 OcNOS 功能矩陣。
依網路區分的交換器
每個網路使用適合其流量的交換器,全部執行 OcNOS-DC。

GPU fabric spine 與 leaf
Edgecore AIS800-64D
Tomahawk 5 · 51.2 Tbps
64 × 800G

400G GPU rail leaf
Edgecore AS9736-64D
Tomahawk 4 · 25.6 Tbps
64 × 400G

前端與儲存 leaf
UfiSpace S9300-32D
Trident 4 · 12.8 Tbps
32 × 400G

帶外管理
UfiSpace S6301-56ST
Trident 3 · 120 Gbps
48 × 1G、8 × 10G
OcNOS on open switches carries the AI fabric at 40 to 60% lower hardware cost ,在相當的埠速率與 radix 下低於專有平台。 了解無損 AI fabric 的運作方式。 在 OcNOS 硬體相容性清單中查看經認證交換器的完整清單。
在資料中心執行 OcNOS 的業者
IzarLink
EVPN-VXLAN 核心將 25G 接取匯聚到備援的 100G 核心,並互連其資料中心與對等互連站點。
閱讀案例 →Nextlink Internet
在橫跨 11 個州的 Edgecore 硬體上,以 OcNOS-DC 支撐核心資料中心營運,以 OcNOS-SP 承載中程傳輸。
閱讀案例 →Scott Data
OcNOS 執行在 UfiSpace、Edgecore 與 Celestica 硬體上,涵蓋一個提供主機代管服務、通過 Tier III 認證的資料中心園區。
閱讀案例 →「IP Infusion OcNOS 提供了技術深度與更佳的網路經濟效益,使我們能夠及時升級資料中心核心網路,獲得面向未來的規模、安全性與韌性。」
Alexis Guirlé,IzarLink 執行長
關於 neocloud 網路的問題。
neocloud 與 GPU 雲端服務商的 AI 需要什麼樣的網路?
一個平台能否同時支援 AI 訓練與推論?
GPU 雲端如何隔離不同客戶?
當鏈路或交換器發生故障時,fabric 如何維持推論可用?
如何評估用於 AI 訓練與推論的網路廠商?
neocloud 如何連接各個站點?
產品規格書與解決方案簡介。
OcNOS-DC 規格書與兩份解決方案簡介,方便與您的團隊分享。表單簡短,PDF 立即下載。
OcNOS 800G 無損 AI Fabric
基於 Tomahawk 5 spine 的無損 RoCEv2 fabric:SKU 等級、經認證的平台與部署架構。
取得簡報EVPN-VXLAN 資料中心網路
基於 EVPN-VXLAN 的 leaf-spine 資料中心 fabric:每租戶一個 VRF 與多個 VNI、EVPN 多歸屬、BGP unnumbered 與 route-target 過濾。
取得簡報OcNOS-DC 規格書
完整的 OcNOS-DC 規格:EVPN-VXLAN 與 Ethernet for AI 功能集、軟體 SKU、支援的硬體平台,以及解決方案訂購指南。
取得規格書OcNOS 800G 無損 AI Fabric
表單簡短。提交後您的 PDF 將立即在新標籤頁中打開。
✓ 正在新標籤頁中打開您的 PDF……
如果未能自動打開,請使用下方連結。
EVPN-VXLAN 資料中心網路
表單簡短。提交後您的 PDF 將立即在新標籤頁中打開。
✓ 正在新標籤頁中打開您的 PDF……
如果未能自動打開,請使用下方連結。
OcNOS-DC 規格書
表單簡短。提交後您的 PDF 將立即在新標籤頁中打開。
✓ 正在新標籤頁中打開您的 PDF……
如果未能自動打開,請使用下方連結。
需要我們主動與您聯繫嗎?
留下您的資訊,IP Infusion 工程師將協助您設計一張用於 AI 訓練與推論的開放 fabric。僅在您希望時我們才會與您聯繫。