Detección y recuperación de bloqueos de PFC
La pausa PFC es lo que hace que RoCEv2 sea sin pérdidas, pero bajo condiciones poco frecuentes de topología y enrutamiento puede crear una dependencia circular en la que cada switch queda en pausa esperando al siguiente del ciclo, y el tráfico se detiene de forma indefinida. OcNOS-DC incorpora un watchdog que detecta el ciclo en milisegundos y drena la cola afectada automáticamente, antes de que los trabajos de entrenamiento se bloqueen.
Un ciclo de pausa de 3 switches
Tres switches en una dependencia circular. Cada uno está en pausa en su cola de prioridad sin pérdidas, esperando a que el siguiente switch se drene. Sin intervención, el ciclo es estable indefinidamente. El watchdog de OcNOS se dispara tras el tiempo de espera configurado, drena la cola-3 en el switch-A y el ciclo colapsa.
Cómo PFC crea un interbloqueo
PFC es una pausa salto a salto: el switch-A activa la pausa hacia su nodo ascendente cuando su cola de ingreso sin pérdidas se llena más allá del umbral, y el nodo ascendente deja de enviar. Esto funciona bien en una topología de árbol donde hay una única dirección de flujo de tráfico. En un fabric leaf-spine con múltiples rutas, el reencaminamiento ECMP alrededor de una falla de enlace puede, bajo condiciones específicas, crear una ruta circular en la que cada switch está en pausa esperando al siguiente.
Una vez que se forma el ciclo, es estable: hay suficiente memoria para retener las tramas en pausa, el protocolo de enrutamiento cree que todo está bien, y PFC sigue reactivándose en cada switch. Sin intervención, la prioridad sin pérdidas afectada queda colgada indefinidamente. El tráfico RoCEv2 se detiene, los colectivos xCCL (NCCL / RCCL / oneCCL) sufren timeout, el job de entrenamiento se estanca.
El watchdog de OcNOS-DC
Temporizador por puerto y por prioridad
A timer runs per ingress port and per lossless priority. If the priority is paused continuously for the configured interval (typically 100-400 ms), the watchdog fires.
Drenaje automático de colas
Cuando se dispara, la cola de ingreso afectada se vacía: se descartan tramas temporalmente para colapsar el ciclo. Las tramas descartadas activan retransmisiones de los colectivos xCCL, pero la alternativa es un bloqueo indefinido.
Restauración automática tras la recuperación
Tras el intervalo de restauración configurado, la operación normal de PFC se reanuda en la prioridad afectada. No se requiere intervención del operador; la fabric vuelve a estar sin pérdidas en segundos.
contadores gNMI
Los eventos de disparo del watchdog, las duraciones de drenaje y los contadores de pausa por prioridad se transmiten por gNMI para una monitorización de fabric en lazo cerrado. Los SREs ven los eventos de deadlock como alertas, no como paradas de entrenamiento silenciosas.
Temporizadores configurables por el operador
El timeout de detección, la duración del drenaje y el intervalo de restauración son configurables por CLI por puerto y por prioridad. Los valores predeterminados funcionan para la mayoría de los fabrics; el operador puede acortar los temporizadores en clústeres de alto riesgo.
Nivel de licencia DC-PLUS
Forma parte del SKU OcNOS-DC PLUS junto con el resto del stack RoCEv2 sin pérdidas. Confirmado en plataformas Broadcom Tomahawk 4 y Tomahawk 5.
Cuándo verá esto activarse
En una fabric bien diseñada con topología y enrutamiento adecuados, los deadlocks de PFC son poco frecuentes. La mayoría de los operadores nunca ven uno en años de operación. El watchdog importa porque "raro" no significa "nunca": un fallo de enlace durante una ventana de convergencia del enrutamiento, una configuración incorrecta de las prioridades PFC en un único puerto o un evento de congestión transitoria sobre un patrón de tráfico inusual pueden crear, todos ellos, las condiciones. Sin el watchdog, cuando este se activa, el cluster de IA se detiene y el equipo de operaciones tiene por delante horas de depuración. Con el watchdog, se obtiene una breve ráfaga de retransmisión y un evento registrado. Para diseñar la topología y los niveles de conmutación que mantienen los interbloqueos poco frecuentes desde el principio, utilice el Herramienta de dimensionamiento de AI Fabric.
La conclusión
- Red de seguridad sin pérdidas. El watchdog es la diferencia entre "PFC es teóricamente riesgoso en fabrics de IA en producción" y "PFC es seguro de desplegar a escala."
- Recuperación en menos de un segundo. Detección + vaciado + restauración se completa habitualmente en menos de un segundo. xCCL retransmite una pequeña ventana de tráfico RDMA; el job continúa.
- Configuración estándar. El watchdog está activado de forma predeterminada en la plantilla sin pérdidas de OcNOS-DC. Usted no necesita acordarse de activarlo.
- Observable. Cada incidente se registra, se contabiliza y se transmite mediante gNMI. Monitorización en lazo cerrado con su pila de observabilidad existente.
- Ajustable según lo que esté en juego. Reduzca los temporizadores en los clústeres de entrenamiento críticos; los valores predeterminados están bien para un fabric de DC general.
¿Está validando el comportamiento sin pérdidas en una nueva fabric? Comience con el watchdog.
Solicite una demostración técnica →Preguntas frecuentes
¿Qué causa un bloqueo PFC?
¿Cómo recupera la fabric el watchdog PFC de OcNOS?
¿El watchdog descarta tráfico?
¿Está habilitado por defecto el watchdog anti-deadlock de PFC?
Profundice. Llévelo consigo.
Dos descargas técnicas y concisas que profundizan más que esta página: la arquitectura de fabric de IA 800G sin pérdidas y la referencia de data center EVPN-VXLAN.
AI Fabric sin pérdidas de 800G con OcNOS
Fabric RoCEv2 sin bloqueo sobre spines Broadcom Tomahawk 4/5: niveles de SKU, plataformas validadas y arquitectura de despliegue.
Obtener el briefFabric DC EVPN-VXLAN
Fabric de data center leaf-spine de nivel operador: IRB simétrico, rutas Type-2/Type-5 y gateway anycast distribuido.
Obtener el briefAI Fabric sin pérdidas de 800G con OcNOS
Formulario rápido. Su PDF se abre en una pestaña nueva inmediatamente después de enviarlo.
✓ Abriendo su PDF en una pestaña nueva…
Si no se ha abierto, utilice el enlace de abajo.
Solution_Brief-OcNOS_800G_Ethernet-Based_Lossless_AI_Fabric.pdfFabric DC EVPN-VXLAN
Formulario rápido. Su PDF se abre en una pestaña nueva inmediatamente después de enviarlo.
✓ Abriendo su PDF en una pestaña nueva…
Si no se ha abierto, utilice el enlace de abajo.
OcNOS-modernize-your-data-center-EVPN-VxLAN_Solution-Brief.pdfDesign the whole AI fabric with OcNOS
From the business case to the port-count maths, pick up wherever you are in the build.