Arquitectura de fabric de centro de datos de IA
Un centro de datos de IA ejecuta cuatro planos de red, no una red plana: una fabric de back-end de IA para los colectivos GPU a GPU, una fabric de almacenamiento, una fabric de front-end y un plano de gestión out-of-band aislado. El DCI coherente extiende el entrenamiento entre sitios, y OcNOS-DC ejecuta cada plano sobre un solo NOS sobre hardware Broadcom Tomahawk validado.
Diseñe los planos, no solo los switches
La mayoría de los errores de fabric de IA son errores de alcance: los equipos dimensionan el plano de GPU y luego atornillan el almacenamiento, el acceso de tenants y la gestión sobre él como una ocurrencia tardía.
En cambio, separe el tráfico por plano y dé a cada uno la relación de suscripción y el aislamiento que necesita. Solo la fabric de back-end de IA tiene que ser sin bloqueo y sin pérdidas; los otros tres existen para mantener fuera de ella el tráfico que no le corresponde. Los cuatro planos, más los enlaces coherentes que unen los sitios, corren sobre OcNOS-DC y listado en la HCL hardware Tomahawk y Trident.
Cada plano tiene un solo trabajo
Dimensione cada plano para su propio trabajo, mantenga su tráfico en sus propios cables, y la fabric se mantiene predecible bajo un entrenamiento completo.
Fabric de back-end de IA
El plano GPU a GPU que transporta los colectivos. Construido sin bloqueo 1:1 como un pod leaf-spine rail-optimized o un Clos de 5 etapas sobre un underlay eBGP de capa 3 pura, y mantenido sin pérdidas con la fabric RoCEv2 que RDMA requiere: PFC (incluido sobre L3, con DCBX/LLDP) y ECN. DLB reparte los flujos de modo que ningún enlace se convierte en un punto caliente durante AllReduce.
Fabric de almacenamiento
Un Clos leaf-spine que mueve checkpoints y datasets entre los racks de GPU y el almacenamiento NVMe-oF o NFS. Típicamente dimensionado cerca de 3:1, ya que las ráfagas de almacenamiento toleran más sobresuscripción que los colectivos, y mantenido sin pérdidas de modo que el tráfico de almacenamiento RDMA no se descarte bajo carga.
Fabric de front-end
El plano norte-sur para el acceso de tenants, el servicio de inferencia y la salida hacia el resto del centro de datos e internet. Ejecuta acceso 400G o 800G, dimensionado al tráfico de servicio que transporta en lugar del patrón colectivo del plano de back-end.
Gestión out-of-band
Un plano Clos o MLAG aparte sobre sus propios cables, de modo que la puesta en marcha y la monitorización nunca comparten destino con los planos de datos. Transporta ZTP, SNMP y syslog, y telemetría de streaming gNMI/OpenConfig, y sigue funcionando cuando una fabric de plano de datos se está reconfigurando.
Cuatro fabrics más DCI, sobre un solo NOS
Un centro de datos, cuatro planos, extendido a un segundo sitio sobre óptica coherente. El plano de back-end de IA es sin bloqueo 1:1; el almacenamiento, el front-end y la gestión corren cada uno a la relación que su tráfico necesita. Cada plano corre OcNOS-DC, y el enlace DCI ZR+ escala el entrenamiento entre sitios sin transpondedores externos.
Componentes de OcNOS: un underlay enrutado eBGP-unnumbered por plano (el back-end de IA es capa 3 eBGP pura, con EVPN-VXLAN mantenido como overlay de tenant en lugar del underlay de IA), RoCEv2 sin pérdidas (PFC + ECN, PFC sobre L3 con DCBX/LLDP) y DLB en los planos de back-end y almacenamiento, un plano de gestión aislado para ZTP y telemetría gNMI, y óptica coherente 400G/800G ZR y ZR+ para DCI en los AIS800-64D, S9321-64E y AS9736-64D. Los planos de back-end se construyen sobre hardware Tomahawk 5 (Edgecore AIS800-64D, UfiSpace S9321-64E / 64EO) y Tomahawk 4 (Edgecore AS9736-64D) listado en la HCL; el plano de gestión ejecuta la imagen OcNOS-DC MGMT en switches Trident 3.
DCI coherente, sin transpondedores externos
Cuando un único entrenamiento supera una sala de datos, la fabric se extiende por la WAN sobre óptica coherente enchufable 400G y 800G ZR+, directamente desde un puerto de borde.
En OcNOS-DC, la óptica 800G ZR, OpenZR y ZR+ funciona en los Tomahawk 5 Edgecore AIS800-64D y UfiSpace S9321-64E, y la óptica 400G ZR y OpenZR+ en el Tomahawk 4 Edgecore AS9736-64D. 400ZR cubre distancias metropolitanas de hasta unos 120 km, y OpenZR+ con oFEC llega más lejos, mientras cada sitio conserva su propia fabric leaf-spine sin cambios. Vea el DCI coherente análisis a fondo para el detalle de óptica y alcance.
Qué hardware ejecuta cada plano
Los planos back-end de IA, almacenamiento y front-end ejecutan OcNOS-DC sobre silicio Broadcom Tomahawk. Los planos 800G y el DCI circulan sobre Tomahawk 5; los planos de entrada y 400G circulan sobre Tomahawk 4. Ambos son switches on-chip de búfer compartido. El plano de gestión fuera de banda ejecuta la imagen OcNOS-DC MGMT en switches Trident 3 de 1G/10G, y cada plataforma está en la Hardware Compatibility List de OcNOS.
| Capa de silicio | Tomahawk 5Planos 800G + DCI | Tomahawk 4planos de entrada + 400G |
|---|---|---|
| Componente Broadcom | BCM78900 | BCM56990 |
| Capacidad de switch | 51,2 Tbps | 25,6 Tbps |
| Configuración de puertos | 64×800G | 64×400G |
| Buffer | Búfer compartido on-chip; listado en la HCL. | Búfer compartido on-chip; listado en la HCL. |
| Plataformas | Edgecore AIS800-64D, UfiSpace S9321-64E, UfiSpace S9321-64EO. Óptica 800G ZR, OpenZR y ZR+ en los AIS800-64D y S9321-64E. | Edgecore AS9736-64D. |
| Rol en el diseño | Planos de back-end de IA y almacenamiento a 800G, más DCI coherente entre sitios. | Construcciones de entrada y planos de front-end o gestión 400G. |
El poder de un solo NOS
Los cuatro planos y los enlaces DCI no son cuatro productos. Son un solo sistema operativo en cuatro roles: OcNOS-DC ejecuta las fabrics de back-end de IA, almacenamiento, front-end y gestión out-of-band, más el DCI coherente, con un solo modelo de configuración y una sola pila de telemetría sobre gNMI y OpenConfig. El equipo aprende una CLI, una superficie de automatización y un conjunto de contadores para cada plano.
Un solo modelo operativo
El mismo modelo de enrutamiento, QoS y telemetría aplica ya sea que un puerto sea un leaf de back-end de cara a GPU, un leaf de almacenamiento, un borde de front-end o un switch de gestión.
Un contrato de soporte
Un solo contrato de IP Infusion cubre el software y el hardware validado, con un solo TAC y un solo SLA en cada plano. Sin señalarse con el dedo entre un proveedor de NOS y uno de hardware.
Una sola lista de hardware
Cada plano se construye a partir de la misma Hardware Compatibility List de OcNOS, de modo que el soporte, la óptica y el firmware se mantienen consistentes en todo el diseño.
Un solo roadmap en el que crecer
El GLB en toda la fabric está disponible en OcNOS 7.1. En el roadmap: ECN basado en latencia (7.1.0) y LLR, CBFS y packet trimming. El próximo silicio Tomahawk 6 (BCM78910 / BCM78914, 102.4 Tbps, TSMC 3nm) circula sobre el tren OcNOS 7.2 y extiende el mismo diseño a mayor radix. Construya el plano de telemetría desde el primer día para que estos lleguen como pasos de software.
Preguntas frecuentes sobre arquitectura de fabric de IA
¿Qué fabrics componen un centro de datos de IA?
¿Qué sobresuscripción debe usar cada fabric?
¿Cómo se conectan dos centros de datos de IA?
¿Puede un solo NOS ejecutar todas las fabrics?
¿Qué hardware ejecuta cada plano?
Profundice. Llévelo consigo.
El datasheet del producto y descargas técnicas y breves que profundizan más que esta página.
Datasheet de OcNOS-DC
Especificación completa de OcNOS-DC: el conjunto de funciones EVPN-VXLAN y Ethernet for AI, los SKU de software, las plataformas de hardware compatibles y la guía de pedido de la solución.
Obtener el datasheetAI Fabric sin pérdidas de 800G con OcNOS
Fabric RoCEv2 sin bloqueo sobre spines Broadcom Tomahawk 4/5: niveles de SKU, plataformas validadas y arquitectura de despliegue.
Obtener el briefFabric DC EVPN-VXLAN
Fabric de centro de datos leaf-spine de nivel operador: IRB simétrico, rutas Type-2/Type-5 y gateway anycast distribuido.
Obtener el briefDatasheet de OcNOS-DC
Formulario rápido. Su PDF se abre en una pestaña nueva inmediatamente después de enviarlo.
✓ Abriendo su PDF en una pestaña nueva…
Si no se ha abierto, utilice el enlace de abajo.
AI Fabric sin pérdidas de 800G con OcNOS
Formulario rápido. Su PDF se abre en una pestaña nueva inmediatamente después de enviarlo.
✓ Abriendo su PDF en una pestaña nueva…
Si no se ha abierto, utilice el enlace de abajo.
Fabric DC EVPN-VXLAN
Formulario rápido. Su PDF se abre en una pestaña nueva inmediatamente después de enviarlo.
✓ Abriendo su PDF en una pestaña nueva…
Si no se ha abierto, utilice el enlace de abajo.
¿Diseñando el centro de datos de IA completo? Planificaremos cada plano con usted.
Díganos la escala de GPU y la carga de trabajo, y un ingeniero de IP Infusion dimensionará los planos de back-end, almacenamiento, front-end, gestión y DCI con usted, o empiece con un primer trazado en el AI Fabric Design Suite.
Diseñe toda la fabric de IA con OcNOS
Desde el caso de negocio hasta los cálculos de recuento de puertos, retome donde esté en la construcción.