Architecture de fabric de centre de données IA
Un centre de données IA exploite quatre plans réseau, et non un seul réseau à plat : un fabric back-end IA pour les collectifs GPU-à-GPU, un fabric de stockage, un fabric front-end et un plan de gestion hors bande isolé. Le DCI cohérent étend l'entraînement à travers les sites, et OcNOS-DC exploite chaque plan sur un seul NOS au-dessus de matériel Broadcom Tomahawk qualifié.
Concevez les plans, pas seulement les commutateurs
La plupart des erreurs de fabric IA sont des erreurs de périmètre : les équipes dimensionnent le plan GPU, puis y greffent le stockage, l'accès locataire et la gestion après coup.
Séparez plutôt le trafic par plan, et donnez à chacun le ratio de souscription et l'isolation dont il a besoin. Seul le fabric back-end IA doit être non bloquant et sans perte ; les trois autres existent pour en tenir à l'écart le trafic qui n'y a pas sa place. Les quatre plans, plus les liens cohérents qui relient les sites, fonctionnent sur OcNOS-DC et référencé HCL du matériel Tomahawk et Trident.
Chaque plan a une seule mission
Dimensionnez chaque plan pour sa propre mission, gardez son trafic sur ses propres câbles, et le fabric reste prévisible pendant un entraînement complet.
Fabric back-end IA
Le plan GPU-à-GPU qui transporte les collectifs. Bâti 1:1 non bloquant sous forme de pod leaf-spine rail-optimized, ou à trois niveaux avec un super-spine, sur un underlay eBGP purement Layer 3, et maintenu sans perte avec le fabric RoCEv2 que le RDMA exige : PFC (y compris sur L3, avec DCBX/LLDP) et ECN. DLB répartit les flux afin qu'aucun lien ne devienne un point chaud pendant l'AllReduce.
Fabric de stockage
Un Clos leaf-spine qui déplace les points de contrôle et les jeux de données entre les racks GPU et le stockage NVMe-oF ou NFS. Généralement dimensionné autour de 3:1, puisque les rafales de stockage tolèrent plus de sursouscription que les collectifs, et maintenu sans perte afin que le trafic de stockage RDMA ne soit pas perdu sous charge.
Fabric front-end
Le plan nord-sud pour l'accès des locataires, le service d'inférence et le chemin vers le reste du data center et Internet. Il assure un accès 400G ou 800G, dimensionné selon le trafic de service qu'il transporte plutôt que selon le motif collectif du plan back-end.
Gestion hors bande
Un plan Clos ou MLAG distinct sur son propre câblage, afin que la mise en service et la supervision ne partagent jamais le sort des plans de données. Il transporte ZTP, SNMP et syslog, ainsi que la télémétrie en streaming gNMI/OpenConfig, et continue de fonctionner pendant la reconfiguration d'un fabric de plan de données.
Quatre fabrics plus le DCI, sur un seul NOS
Un data center, quatre plans, étendu à un second site via optique cohérente. Le plan back-end IA est non bloquant 1:1 ; le stockage, le front-end et la gestion fonctionnent chacun au ratio requis par leur trafic. Chaque plan exécute OcNOS-DC, et la liaison DCI ZR+ met l'entraînement à l'échelle entre les sites sans transpondeurs externes.
Composants OcNOS : un underlay routé eBGP-unnumbered par plan (le back-end IA est du pur eBGP Layer 3, avec EVPN-VXLAN conservé comme overlay locataire plutôt que comme underlay IA), du RoCEv2 sans perte (PFC + ECN, PFC over L3 avec DCBX/LLDP) et du DLB sur les plans back-end et stockage, un plan de gestion isolé pour ZTP et la télémétrie gNMI, et des optiques cohérentes 400G ZR et ZR+ ou 800G ZR pour le DCI sur les AIS800-64D, S9321-64E et AS9736-64D. Les plans back-end reposent sur du matériel Tomahawk 5 référencé dans la HCL (Edgecore AIS800-64D, UfiSpace S9321-64E / 64EO) et Tomahawk 4 (Edgecore AS9736-64D) ; le plan de gestion exécute l'image OcNOS-DC MGMT sur des commutateurs Trident 3.
DCI cohérent, sans transpondeurs externes
Lorsqu'un même run d'entraînement dépasse une salle de données, le fabric s'étend sur le WAN via des optiques enfichables cohérentes 400G ZR+ ou 800G ZR, directement depuis un port de bordure.
Sur OcNOS-DC, les optiques 800G ZR fonctionnent sur les Tomahawk 5 Edgecore AIS800-64D et UfiSpace S9321-64E, et les optiques 400G ZR et OpenZR+ sur le Tomahawk 4 Edgecore AS9736-64D. Le 400ZR couvre les distances métropolitaines jusqu'à environ 120 km, et l'OpenZR+ avec l'oFEC porte plus loin, tandis que chaque site conserve son propre fabric leaf-spine inchangé. Consultez le DCI cohérent dossier approfondi pour le détail des optiques et de la portée.
Quel matériel exécute chaque plan
Les plans back-end IA, stockage et front-end exécutent OcNOS-DC sur du silicon Broadcom Tomahawk. Les plans 800G et le DCI reposent sur Tomahawk 5 ; les plans d'entrée de gamme et 400G reposent sur Tomahawk 4. Ce sont tous deux des commutateurs à buffer partagé on-chip. Le plan de gestion hors bande exécute l'image OcNOS-DC MGMT sur des commutateurs Trident 3 1G/10G, et chaque plateforme figure sur la liste de compatibilité matérielle (HCL) OcNOS.
| Couche silicon | Tomahawk 5Plans 800G + DCI | Tomahawk 4Plans d'entrée de gamme + 400G |
|---|---|---|
| Référence Broadcom | BCM78900 | BCM56990 |
| Capacité du commutateur | 51,2 Tbps | 25,6 Tbps |
| Configuration des ports | 64×800G | 64×400G |
| Buffer | Buffer partagé on-chip ; référencé dans la HCL. | Buffer partagé on-chip ; référencé dans la HCL. |
| Plateformes | Edgecore AIS800-64D, UfiSpace S9321-64E, UfiSpace S9321-64EO. Optiques 800G ZR sur les AIS800-64D et S9321-64E. | Edgecore AS9736-64D. |
| Rôle dans la conception | Plans back-end IA et stockage à 800G, plus le DCI cohérent entre les sites. | Déploiements d'entrée de gamme et plans front-end ou de gestion 400G. |
La puissance d'un seul NOS
Les quatre plans et les liaisons DCI ne sont pas quatre produits. Ils constituent un seul système d'exploitation dans quatre rôles : OcNOS-DC exécute les fabrics back-end IA, stockage, front-end et de gestion hors bande, plus le DCI cohérent, avec un seul modèle de configuration. L'équipe apprend une seule CLI, une seule surface d'automatisation et un seul ensemble de compteurs pour chaque plan.
Un modèle opérationnel unique
Le même modèle de routage, de QoS et de télémétrie s'applique qu'un port soit un leaf back-end côté GPU, un leaf de stockage, une bordure front-end ou un commutateur de gestion.
Un seul contrat de support
Lorsque vous achetez les switches en tant qu'OcNOS Systems, un seul contrat IP Infusion couvre le logiciel et le matériel, avec un seul TAC et un seul SLA sur l'ensemble des plans. Pour le matériel que vous achetez vous-même, IP Infusion assure le support du logiciel et le fabricant celui du matériel.
Une seule liste de matériel
Chaque plan est construit à partir de la même liste de compatibilité matérielle OcNOS, de sorte que le support, les optiques et le firmware restent cohérents dans toute la conception.
Une feuille de route pour évoluer
Le GLB à l'échelle de la fabric arrive avec OcNOS 7.1. Le futur silicium Tomahawk 6 (BCM78910 / BCM78914, 102.4 Tbps, TSMC 3nm) suit le train OcNOS 7.2 et étend la même conception à un radix plus élevé.
FAQ sur l'architecture du fabric IA
Quels fabrics composent un data center IA ?
Quel taux de sursouscription chaque fabric doit-il utiliser ?
Comment connecter deux data centers IA ?
Un seul NOS peut-il exécuter tous les fabrics ?
Quel matériel exécute chaque plan ?
Approfondissez. Emportez-le avec vous.
La fiche technique du produit et des téléchargements techniques et concis qui vont plus loin que cette page.
Datasheet OcNOS-DC
Spécification complète OcNOS-DC : l'ensemble des fonctionnalités EVPN-VXLAN et Ethernet for AI, les SKU logiciels, les plateformes matérielles prises en charge et le guide de commande de la solution.
Obtenir la fiche techniqueOcNOS 800G Fabric IA sans perte
Fabric RoCEv2 sans perte sur des spines Tomahawk 5 : niveaux de SKU, plateformes qualifiées et architecture de déploiement.
Obtenir le briefFabric DC EVPN-VXLAN
Fabric de centre de données leaf-spine sur EVPN-VXLAN : une VRF et des VNI par locataire, multihoming EVPN, BGP unnumbered et filtrage par route target.
Obtenir le briefDatasheet OcNOS-DC
Formulaire rapide. Votre PDF s'ouvre dans un nouvel onglet immédiatement après l'envoi.
✓ Ouverture de votre PDF dans un nouvel onglet…
S'il ne s'est pas ouvert, utilisez le lien ci-dessous.
OcNOS 800G Fabric IA sans perte
Formulaire rapide. Votre PDF s'ouvre dans un nouvel onglet immédiatement après l'envoi.
✓ Ouverture de votre PDF dans un nouvel onglet…
S'il ne s'est pas ouvert, utilisez le lien ci-dessous.
Fabric DC EVPN-VXLAN
Formulaire rapide. Votre PDF s'ouvre dans un nouvel onglet immédiatement après l'envoi.
✓ Ouverture de votre PDF dans un nouvel onglet…
S'il ne s'est pas ouvert, utilisez le lien ci-dessous.
Vous concevez l'intégralité du data center IA ? Nous planifierons chaque plan avec vous.
Indiquez-nous l'échelle GPU et la charge de travail, et un ingénieur IP Infusion dimensionnera avec vous les plans back-end, stockage, front-end, gestion et DCI, ou commencez par une première ébauche d'implantation dans l'AI Fabric Design Suite.
Concevez tout le fabric IA avec OcNOS
Du dossier économique au calcul du nombre de ports, reprenez où vous en êtes dans la construction.