INFRASTRUKTUR ARKITEKTUR

NVIDIA GB200 NVL72 Infrastruktur og MPO-8 APC Kabling for Skalerbare Enheter

Avdekker kablingarkitekturen til en Blackwell Skalerbar Enhet (SU), hvor 8 rack konvergerer til 9 216 aktive fiberstrenger.

DGX GB200 Skalerbar Enhet (SU) representerer et stort skifte i datasenterarkitektur. SU er en enhetlig 576-GPU-enhet sammenkoblet av 9 216 aktive fiberstrenger. ScaleFibre leverer de presisjonsterminerte trunkene som kreves for å håndtere denne tettheten.

De 4 Fysiske SuperPOD-Fabricene

NVIDIA segmenterer SU i distinkte fysiske lag for å isolere GPU-trafikk.

MN-NVL (NVLink 5)

Oppskalering

Det ‘interne’ rack-nettverket som kobler sammen 72 GPUer med 1,8 TB/s.

  • Null Optisk Fiber
  • Passiv Kobber Backplane
  • Blind-mate kontakter

Compute InfiniBand

Utvidelse

Den primære ‘Øst-Vest’-fabricen for massiv multi-node trening.

  • 4 608 aktive fibre per SU
  • Rail-optimalisert topologi
  • Quantum-3/Quantum-2

Lagring & In-Band

Frontend

Ethernet-basert fabric for høyhastighets datainntak og klargjøring.

  • 5:3 Blokkeringfaktor
  • BlueField-3 DPU avlasting
  • VXLAN/RoCE støtte

OOB Administrasjon

Kontrollplan

Det isolerte nettverket for maskinvaretelemetri, BMC og PDU-administrasjon.

  • RJ45/Cat6 Kobber
  • SN2201 Svitsjenivå
  • Fysisk luftgap sikkerhet

Exascale SU-Målinger

En 8-rack Skalerbar Enhet representerer den grunnleggende byggeklossen i NVIDIA AI Factory.

9,216

Aktive Fibre per SU

4,608

Kun Compute-strenger

5:3

Lagringsblokkeringsforhold

400G/800G

Native Port-hastigheter

De Tre Nivåene av SU-Tilkobling

1
Nivå A: Server-til-Leaf

1 152 fibre per rack med trunker med høyt fiberantall eller jumpere for å koble NVL72-noder til Leaf-svitsjer.

2
Nivå B: Leaf-til-Spine

Aggregering av rail-justert trafikk innenfor SU ved hjelp av 1:1 ikke-blokkerende lenker for compute.

3
Nivå C: Spine-til-Core

Skalering utover SU til et sentralisert Core-område ved hjelp av trunker med høyt antall.

Tradisjonell Patching (Punkt-til-punkt)

  • ✕
    Manuell kompleksitet: Krever 9 216 individuelle patchkabler per 8-rack blokk.
  • ✕
    Luftstrømsblokkering: Tette kabelbunter blokkerer avtrekksveier for væskekjøling.
  • ✕
    Risikoprofil: Høy sannsynlighet for ‘kryssede skinner’ under manuell 1:1 patching.
  • ✕
    Implementeringstid: 115+ timer for manuell ruting og merking per SU.

Modulær Trunking med Høyt Fiberantall

  • ✓
    Plug-and-Play: Konsoliderer tusenvis av fibre til ferdigterminerte 128F/144F/256F/288F/576F skreddersydde trunker.
  • ✓
    Termisk optimalisering: Kabler med liten diameter maksimerer luftstrømmen i tette rack.
  • ✓
    Baneeffektivitet: Konsoliderer 1 152 aktive fibre per rack til MPO-backbones med høyt antall.
  • ✓
    Installasjonsprofil: Rask implementering via ferdigterminerte, fabrikktestede samlinger.

Vekst i Aktive Fibre: Node til Full SuperPOD

Kablingkompleksitet
9 216 aktive fibre per SU krever modulære trunker med høyt fiberantall for å unngå 'kabelkaos' som blokkerer luftstrømmen.

Skalerbar Enhet Visualisert

8-Rack Compute-Blokken
8-Rack Compute-Blokken

En NVIDIA GB200 SU (Skalerbar Enhet) består av 8 rack, hvor hvert huset et DGX GB200 NVL72-system med 72 GPUer.

Distribusjon av Trunking med Høyt Fiberantall
Distribusjon av Trunking med Høyt Fiberantall

Konsolidering av tusenvis av rackfibre til trunker med høy tetthet for luftstrømklaring, rask installasjon og minimalt baneforbruk.

Væskekjøling
Væskekjøling

Væskekjølte kaldplater stabiliserer brettmiljøet, noe som gjør at OSFP-transceivere effektivt kan avgi varme via påsittende kjøleribber.

Technical FAQ

+ Hvordan forblir SU-antallet håndterbart med 9 216 fibre?
Ved å bruke et hierarki av kabling i flere nivåer. Trunker med høyt fiberantall erstatter tusenvis av individuelle MPO-patchkabler, noe som reduserer det fysiske volumet og forhindrer kjølehindringer.
+ Hva er '5:3 Blokkeringfaktoren' i lagringsfabricen?
I motsetning til den ikke-blokkerende (1:1) compute-fabricen, er lagringsnettverket bevisst overabonnert. Dette reduserer fiberkostnader og kompleksitet samtidig som det oppfyller 40 GB/s per-node kravet for lagring. Implementering bruker ofte NVIDIA-kompatible MPO patchkabler.
+ Hvorfor er den interne NVLink-fabricen fiberfri?
NVIDIA bruker en passiv kobber-backplane og kabelpatroner i NVL72-racket. Dette eliminerer tusenvis av optiske transceivers og fibre, noe som reduserer strømforbruk og latens betydelig. Optisk fiber er reservert for skalering-ut compute-fabricen.
+ Hva skjer når vi skalerer til 16 Skalerbare Enheter?
På 16-SU skalaen (9 216 GPUer) når det totale antallet aktive fibre for compute-fabricen alene 18 432 strenger. Håndtering av denne tettheten krever hus med høy tetthet designet spesifikt for optisk fiber med høyt antall og sentraliserte core-gruppe svitsjearkitekturer.
+ Hvorfor brukes MPO-8 i stedet for standard MPO-12?
Moderne 400G NDR og 800G XDR transceivers bruker 4-felts eller 8-felts parallelloptikk. En 8-fiber MPO-justering matcher 4x Tx og 4x Rx-konfigurasjonen perfekt. Bruk av 8-fiber aktive MPO-trunker eliminerer ‘mørke’ eller bortkastede fibre i klynge-fabricen.
+ Hva er viktigheten av APC (Angled Physical Contact) polering?
Høyhastighets 100G-PAM4-signalering er ekstremt følsom for tilbakekastninger. 8-graders vinkelen på en APC-kontakt sørger for at reflektert lys absorberes i fiberkledningen, og opprettholder den høye Optical Return Loss (ORL) som kreves for feilfri AI-trening.
+ Hvordan påvirker fibertetthet væskekjølte AI-haller?
Selv med væskekjølte brett må luft fortsatt sirkulere for å håndtere sekundær varme. Bruk av høytetthets SmartRibbon-kabler reduserer kabeldiameteren betydelig, og sikrer at den fysiske kablingen ikke hindrer luftstrømmen eller væskekjølemanifoldene.
+ Hva er avstandsbegrensningene for SU-nivåkabling?
Multimode (OM4/OM5) er begrenset til 50 meter for 400G/800G. For sentraliserte Spine-til-Core-lenker som overskrider dette, er Singlemode G.657.A1 fiber obligatorisk for å støtte lengre rekkevidder uten signaltap.
+ Kan jeg bruke standard utendørskabler for AI datasenter-backbones?
Nei. Innendørs AI-haller krever LSZH (Low Smoke Zero Halogen), Riser eller Plenum for å oppfylle nødvendige brannsikkerhetsforskrifter avhengig av lokale bestemmelser. For høy-tetthetsbaner gir spesialiserte SlimCORE innendørskabler det nødvendige strengantallet i en redusert diameter.
+ Hva er fordelen med fabrikkterminerte pigtails i SU?
MPO-kabel optiske fiberpigtails muliggjør rask massefusjonsspleising på Spine- eller Core-laget. Denne fabrikkkontrollerte termineringen i den ene enden gir fordelene med pre-terminering, mens den ‘stumpede’ enden gir fleksibilitet til å tilpasses den nødvendige lengden på stedet.

Arkitekter din AI-fabrikk

ScaleFibre leverer ferdigterminerte kablingsløsninger for NVIDIA DGX SuperPOD-distribusjoner.

Ta Kontakt

Få detaljer om trunker med høyt fiberantall for din NVidia DGX SU.

Del: