OcNOS-DC: il NOS per il data center.

OcNOS-DC è la variante data center di OcNOS, di IP Infusion, il sistema operativo di rete in produzione presso oltre 900 operatori in più di 60 Paesi. È pensato per fabric leaf-and-spine che trasportano overlay EVPN-VXLAN, traffico RoCEv2 lossless per cluster AI e ML e collegamenti DCI a 400G o 800G. Gira su switch aperti qualificati basati su Broadcom di Edgecore, UfiSpace e Celestica. IP Infusion supporta il software, e anche l'hardware quando acquistate lo switch come OcNOS System.

OcNOS-DC supporta EVPN-VXLAN con rotte Type-2 MAC/IP e apprendimento ARP/ND per limitare il flooding nell'overlay, oltre al multihoming EVPN per server e storage dual-homed. EVPN-VXLAN gira sugli switch Trident 3 e Trident 4. Le funzioni tenant instradate (IRB, anycast gateway e rotte Type-5 IP-prefix) variano in base al modello di switch; la Feature Matrix elenca ciascuna funzione. Il control plane è MP-BGP EVPN secondo RFC 7432 e RFC 8365, quindi interopera con le implementazioni EVPN basate su standard.

OcNOS-DC include Priority Flow Control (PFC) con QoS su Layer 3 ed Explicit Congestion Notification (ECN) per RoCEv2, così le classi di traffico RDMA possono essere messe in pausa per priorità per evitare la perdita di pacchetti tra GPU. L'edizione DC-PLUS aggiunge Dynamic Load Balancing e il rilevamento e ripristino del deadlock PFC. L'obiettivo è una fabric lossless per le collettive xCCL come NCCL e RCCL. I deployment reali in produzione finora hanno riguardato circa da 20 a 200 GPU, e il progetto scala ulteriormente al crescere dei progetti.

OcNOS-DC è venduto in tre edizioni. DC-MGMT offre switching Layer 2 e routing Layer 3 (OSPF, IS-IS e BGP) per gli switch di gestione out-of-band. DC-IPBASE aggiunge EVPN-VXLAN, e DC-PLUS aggiunge Dynamic Load Balancing e telemetria in streaming. Le funzioni variano in base al modello di switch; la Feature Matrix elenca ogni piattaforma ed edizione.

OcNOS-DC supporta 18 piattaforme hardware aperte di Edgecore, UfiSpace e Celestica, dagli switch di gestione da 1G e dai leaf ToR da 48x25G fino agli spine da 64x800G. Il silicon Broadcom supportato comprende Tomahawk 5 (51.2T, 800G), Tomahawk 4 (25.6T, 400G), Tomahawk 3, Tomahawk 2, Trident 4 e Trident 3. Ogni switch esegue OcNOS-DC nell'edizione adatta al suo ruolo, così gli operatori mantengono un'unica CLI e un'unica toolchain di automazione nei ruoli di leaf, spine e border.

OcNOS-DC espone NETCONF e gNMI in direzione northbound, con modelli di dati OpenConfig e YANG, quindi si inserisce nelle pipeline Ansible esistenti o nei controller sviluppati internamente. Zero Touch Provisioning porta un nuovo leaf o spine nella fabric con il suo software e la configurazione day-zero, senza accesso alla console. L'edizione DC-PLUS include la telemetria in streaming tramite gNMI per l'assurance a ciclo chiuso.

Sono tre modi in cui OcNOS-DC scala la stessa fabric. Lo scale-up fa crescere la capacità di un singolo pod aumentando la banda per switch e la densità di porte, ad esempio passando da una fabric a 100G a 400G e 800G, così la stessa topologia leaf-spine-super-spine alimenta nodi di calcolo più grandi e a banda più elevata senza aggiungere altri pod. Lo scale-out fa crescere la capacità aggiungendo più blocchi uguali, più switch spine e super-spine e più coppie di leaf, allargando la topologia Clos in orizzontale in modo che si colleghino più rack e leaf mentre ogni endpoint mantiene la raggiungibilità any-to-any. Lo scale-across si estende oltre un singolo data center: un'interconnessione coerente collega pod indipendenti in sedi diverse, con BGP ed EVPN che trasportano le rotte tra di essi. OcNOS-DC copre tutti e tre, con l'edizione adatta al ruolo di ciascuno switch.