A rede importa, mas 800 Gbps não é um requisito universal

Em um cluster de IA, a rede conecta aceleradores que trocam dados durante o treinamento e a inferência distribuída. Se os links, os switches ou a configuração não acompanharem a carga, a comunicação pode se tornar um gargalo para o conjunto. Isso não significa que toda instalação precise de uma atualização imediata: a velocidade nominal por si só não prova que existe um gargalo.

O salto de 400 para 800 Gbps duplica a velocidade de cada link, mas não garante que um aplicativo seja duas vezes mais rápido. O resultado também depende do padrão de comunicação, da quantidade de nós, da topologia, do número de links e da gestão do congestionamento. A decisão útil para uma equipe de infraestrutura começa com tráfego observado e objetivos de serviço, não com uma data de calendário nem com uma cifra de catálogo.

Conveniente separar três assuntos que costumam se misturar na conversa comercial: Ethernet de 800 Gb/s como capacidade do link; o desempenho agregado da fabric; e o desempenho de uma carga de trabalho específica. Não são medidas intercambiáveis. Uma rede com links rápidos pode render abaixo do esperado se seu design ou configuração provocar congestionamento, enquanto uma instalação de 400 Gb/s pode continuar sendo suficiente se satisfizer a demanda medida.

O que inclui o Spectrum-X e o que implica ser uma plataforma

A NVIDIA apresenta o Spectrum-X como uma plataforma Ethernet de ponta a ponta que reúne switches Spectrum, SuperNICs ConnectX, DPUs BlueField, cabos LinkX e software de rede. É uma definição do próprio fabricante, útil para identificar o alcance do sistema, mas não prova por si só que qualquer combinação desses componentes vai produzir um resultado determinado em um aplicativo. A integração não substitui a verificação de compatibilidade entre modelos, ópticas, firmware e configuração.

O planteamento do Spectrum-X é coordenar a rede do servidor e a dos switches para cargas de IA. A NVIDIA descreve funções de roteamento adaptativo, controle de congestionamento e balanceamento de carga entre planos. Essas funções buscam gerenciar rajadas de tráfego e evitar que os fluxos se concentrem em rotas saturadas; sua utilidade efetiva deve ser avaliada com a topologia e o padrão de comunicação do cluster previsto.

O que revisar além do nome da plataforma

Em uma solicitação de cotação ou revisão de design, convém pedir a lista exata de referências e a matriz de compatibilidade: modelo de switch, NIC, tipo de porta, transceptor ou cabo, sistema operacional, controlador e versões de software. Também há que distinguir os dados de capacidade do equipamento dos resultados de desempenho que o fabricante comunica para uma configuração concreta.

As cifras de eficiência e escalabilidade publicadas pela NVIDIA são afirmações do fornecedor, não medições independentes aplicáveis automaticamente a qualquer instalação. Para comparar alternativas, o comprador deve solicitar as condições de teste, a carga usada e a definição de métrica. Um percentual sem contexto de ensaio não serve como garantia de desempenho para um cluster distinto.

RoCE e InfiniBand: duas opções com requisitos diferentes

O RoCE permite transportar operações RDMA sobre Ethernet; o InfiniBand é outra tecnologia de rede, com seus próprios componentes e ecossistema. Escolher entre ambos não se reduz a comparar uma cifra de latência ou custo: influenciam a experiência operacional da equipe, o software, a compatibilidade dos aceleradores e adaptadores, a escala e as necessidades de disponibilidade. O pacote de Spectrum-X documentado pela NVIDIA é Ethernet; isso não converte o InfiniBand em uma variante do Spectrum-X.

O RoCE requer atenção ao congestionamento e à configuração da fabric. Mecanismos como PFC e ECN aparecem em análises técnicas como ferramentas relevantes para implantar o RoCE, mas sua presença em uma lista de funções não basta: devem ser configurados e validados nos equipamentos concretos. A rede também não deve ser tratada como "sem perdas" por ativar uma única função; há que revisar filas, prioridades, controle de congestionamento e comportamento sob tráfego simultâneo.

Uma fonte secundária afirma que o RoCEv2 pode alcançar entre 85% e 95% do desempenho de treinamento do InfiniBand em determinados contextos. Não é uma equivalência universal nem uma garantia do fabricante: o material disponível não aporta uma metodologia completa que permita transferir esse intervalo para qualquer carga, topologia ou tamanho de cluster. Portanto, não convém usá-lo como critério único de compra. Para uma decisão vinculante, há que solicitar provas comparáveis com o software e a carga de trabalho do comprador.

ConnectX-8: o nome do adaptador não basta para inferir 800 Gbps

O ConnectX-8 é uma família de adaptadores, não uma especificação única que se possa resumir como "800 Gbps com PCIe Gen6". A documentação da NVIDIA disponível para um modelo C8180 descreve uma porta OSFP e enumera taxas Ethernet de até 400 Gb/s, além de opções InfiniBand. Por outra parte, uma revisão independente da placa C8240 descreve duas portas QSFP112 de 400 GbE. O modelo exato muda o que se pode afirmar sobre portas e capacidade.

A revisão da C8240 informa que a placa pode operar a 800 Gb/s em uma direção em determinadas condições, e menciona um switch PCIe Gen6. Não se deve converter isso em uma afirmação de que qualquer ConnectX-8 entrega 800 Gb/s por uma porta, nem de que a NIC use necessariamente uma interface anfitriã PCIe Gen6 em todos os sistemas. A documentação consultada também indica compatibilidade Gen5 para o modelo C8180; há que verificar a referência e a plataforma anfitriã antes de projetar.

A compatibilidade com H100 ou B200 não fica acreditada pelas fontes disponíveis aqui. Também não se pode assumir que uma NIC de certo caudal seja compatível com toda GPU de última geração: intervêm o servidor, slot PCIe, firmware, controladores, sistema operacional e configuração de rede. Peça a matriz de compatibilidade do fabricante do sistema e do adaptador, não uma inferência baseada na geração do acelerador.

Uma verificação de hardware que evita confusões

Antes de comparar placas, anote por separado: referência completa, número e tipo de portas, velocidade admitida por porta, capacidade agregada e direção de medida, interface PCIe, protocolos e requisitos de energia e fluxo de ar. A ficha do adaptador e a configuração do servidor devem respaldar cada campo.

ConnectX-8: el nombre del adaptador no basta para inferir 800 Gbps ConnectX-8 es una familia de adaptadores, no una especificación única que se pueda resumir como “800 Gbps con PCI...
Imagen generada con IA por BytePreview · AI generated editorial image

A capacidade do switch não equivale à velocidade de cada porta

Uma cifra como 51,2 Tb/s costuma referir-se à capacidade de comutação agregada, não à velocidade de uma porta nem à capacidade útil que verá cada servidor. Uma fonte secundária atribui esse máximo ao Spectrum-4, mas o material oficial incluído para a plataforma Ethernet não identifica essa cifra junto a um modelo concreto de switch. Por isso, não a apresentamos aqui como especificação confirmada de toda a família nem como prova de que o Spectrum-4 seja um switch de 800 Gb/s.

Para verificar um switch há que consultar sua ficha de produto exata: velocidade e quantidade de portas, capacidade de comutação, arquitetura de redundância, opções de transceptor, consumo e limites de configuração. Também é importante determinar se o link de 800 Gb/s é nativo, se se obtém agregando portas ou se depende de uma variante concreta. O caudal agregado do chassi e a velocidade de um link descrevem coisas distintas.

O design de rede deve contemplar o número de servidores e aceleradores, a banda larga para cada nó, a quantidade de saltos, a sobreassinatura e as rotas alternativas. Uma topologia de dois níveis pode ter uma organização distinta de uma de três níveis; nenhuma etiqueta demonstra por si só que o sistema vá entregar baixa latência. O cálculo deve partir das necessidades de comunicação e das limitações documentadas do equipamento escolhido.

Cabeamento, energia e operação: os custos que acompanham a velocidade

Subir a velocidade pode obrigar a revisar ópticas, cabeamento, conectores e procedimentos de instalação. Um comentário difundido no LinkedIn adverte de que a sujeira em uma face de fibra pode interromper um link de alta velocidade. É um aviso operacional plausível, mas a fonte disponível não acredita que qualquer partícula cause necessariamente a falha de um link OSFP a 800 Gb/s. A limpeza e inspeção de conectores são boas práticas, enquanto esse resultado absoluto não deve ser tratado como especificação geral.

A compatibilidade de transceptores e cabos deve ser verificada por modelo, alcance e tipo de fibra ou cabeamento. A conexão física não se deduz só de que dois equipamentos anunciem 800 Gb/s: importam o formato do módulo, o número de trilhos, o meio, a distância e a codificação admitida. Também há que confirmar a polaridade e documentar os links para que uma substituição ou ampliação não dependa de suposições.

A NIC ConnectX-8 documentada no manual da NVIDIA é destinada a servidores de centro de dados e requer alimentação e fluxo de ar adequados; o manual adverte que condições insuficientes podem afetar seu funcionamento ou danificá-la. Isso é uma exigência específica do produto documentado, não uma medida universal de refrigeração para toda instalação de 800 Gb/s. Antes de comprar, integre consumo, ventilação, espaço, manutenção e suporte no cálculo de custo total.

Não há preços comparáveis nem dados de consumo completos no pacote de fontes, por isso não se pode quantificar aqui o custo total de propriedade nem declarar que 800 Gb/s resulte mais barato ou eficiente. Inclua energia, refrigeração, ópticas, instalação e operação na avaliação, e peça valores correspondentes aos modelos e configurações que se estão considerando.

Lista prática para avaliar uma rede de IA

A forma mais sólida de separar especificações de promoção é exigir que cada afirmação importante esteja ligada a uma referência, uma condição de operação e um método de validação. Isso permite comparar uma proposta Ethernet com outra opção sem tratar as cifras agregadas, as capacidades máximas e os resultados de um aplicativo como se fossem equivalentes.

Antes de aprovar uma migração, verifique os seguintes pontos com o fornecedor e a equipe de operação:

  • Carga e objetivo: tráfego observado, padrão de comunicação e requisito de desempenho do aplicativo.
  • Inventário exato: referências de switches, NICs, módulos ópticos, cabos e versões de software.
  • Velocidades: taxa por porta, capacidade agregada, direção da medida e links requeridos para cada servidor.
  • Protocolo e congestionamento: Ethernet com RoCE ou InfiniBand, funções necessárias e configuração documentada.
  • Compatibilidade: matriz do fabricante para servidores, aceleradores, adaptadores, controladores e firmware.
  • Operação física: alimentação, fluxo de ar, conectores, limpeza, polaridade e procedimentos de diagnóstico.
  • Validação: prova com tráfego representativo, critérios de aceitação acordados e comportamento ante falhas.

A conclusão prática não é que todos os centros de dados devam migrar para 800 Gb/s em 2026. É que a velocidade deve responder a uma necessidade medida, e que uma plataforma integrada como o Spectrum-X deve ser avaliada componente por componente e com condições transparentes. Compre uma arquitetura validada para sua carga, não uma cifra isolada nem uma promessa geral de desempenho.