INFRASTRUKTUUR ARGITEKTUUR

NVIDIA GB200 NVL72 Infrastruktuur en MPO-8 APC Kabeling vir Skaalbare Eenhede

Die ontleding van die kabelargitektuur van 'n Blackwell Skaalbare Eenheid (SE), waar 8 rakke saamvloei in 9 216 aktiewe veselstringe.

Die DGX GB200 Skaalbare Eenheid (SE) verteenwoordig ’n groot verskuiwing in datasentrumargitektuur. Die SE is ’n verenigde 576-GPU entiteit wat deur 9 216 aktiewe veselstringe onderling verbind word. ScaleFibre verskaf die presisie-getermineerde trunkerings wat nodig is om hierdie digtheid te bestuur.

Die 4 Fisiese SuperPOD Stofstrukture

NVIDIA segmenteer die SE in afsonderlike fisiese lae om GPU-verkeer te isoleer.

MN-NVL (NVLink 5)

Op-skaal

Die ‘interne’ raknetwerk wat 72 GPU’s teen 1,8 TB/s verbind.

  • Geen Optiese Vesel
  • Passiewe Koper Rugplaat
  • Blind-pas verbindings

Berekening InfiniBand

Af-skaal

Die primêre ‘Oos-Wes’ stofstruktuur vir massiewe multi-node opleiding.

  • 4 608 aktiewe vesels per SE
  • Spoor-geoptimaliseerde topologie
  • Kwantum-3/Kwantum-2

Berging & In-Band

Voorkant

Ethernet-gebaseerde stofstruktuur vir hoëspoed data-inname en voorsiening.

  • 5:3 Blokkeringsfaktor
  • BlueField-3 DPU aflaai
  • VXLAN/RoCE ondersteuning

OOB Bestuur

Beheer vlak

Die geïsoleerde netwerk vir hardeware-telemetrie, BMC en PDU-bestuur.

  • RJ45/Cat6 Koper
  • SN2201 Skakelaarvlak
  • Fisiese luggaping-sekuriteit

Eksaskaal SE Metrieke

'n 8-rak Skaalbare Eenheid verteenwoordig die fundamentele boublok van die NVIDIA KI Fabriek.

9 216

Aktiewe Vesels per SE

4 608

Slegs-Berekening Stringe

5:3

Berging Blokkeringsverhouding

400G/800G

Inheemse Poortspoed

Die Drie Vlakke van SE Konnektiwiteit

1
Vlak A: Bediener-na-Blaar

1 152 vesels per rak met hoë veseltelling trunkerings of springers om NVL72 nodusse aan Blaarskakelaars te koppel.

2
Vlak B: Blaar-na-Spine

Aggregeer spoor-belynde verkeer binne die SE deur 1:1 nie-blokkerende skakels vir berekening te gebruik.

3
Vlak C: Spine-na-Kern

Skaal verder as die SE na ’n gesentraliseerde Kernarea met behulp van hoë-telling trunkerings.

Tradisionele Koppeling (Punt-tot-Punt)

  • Handmatige Kompleksiteit: Vereis 9 216 individuele pleisterkabels per 8-rak blok.
  • Lugvloeibelemmering: Digte kabelbundels blokkeer vloeistofverkoelingsuitlaatpaaie.
  • Risikoprofiel: Hoë waarskynlikheid van ‘gekruiste relings’ tydens handmatige 1:1 koppeling.
  • Ontplooiingstyd: 115+ ure vir handmatige roetering en etikettering per SE.

Modulêre Hoë Veseltelling Trunkerings

  • Inprop-en-Speel: Konsolideer duisende vesels in vooraf-getermineerde 128F/144F/256F/288F/576F pasgemaakte trunkerings.
  • Termiese Optimering: Klein-deursnee kabels maksimeer lugvloei in digte rakke.
  • Roete-doeltreffendheid: Konsolideer 1 152 aktiewe vesels per rak in hoë-telling MPO ruggrate.
  • Installasieprofiel: Vinnige ontplooiing via vooraf-getermineerde fabriekgetoetste samestellings.

Aktiewe Veselgroei: Node tot Volle SuperPOD

Kabelkompleksiteit
9 216 aktiewe vesels per SE vereis modulêre hoë veseltelling trunkerings om lugvloei-blokkerende 'kabelchaos' te vermy.

Skaalbare Eenheid Gevisualiseer

Die 8-Rak Berekeningsblok
Die 8-Rak Berekeningsblok

’n NVIDIA GB200 SE (Skaalbare Eenheid) bestaan uit 8 rakke, elk met ’n DGX GB200 NVL72 stelsel met 72 GPU’s.

Hoë Veseltelling Trunk Distribusie
Hoë Veseltelling Trunk Distribusie

Konsolideer duisende rakvesels in hoëdigtheidstrunkings vir lugvloeiklaring, vinnige installasie en minimale roetegebruik.

Vloeistofverkoeling
Vloeistofverkoeling

Vloeistofverkoelde koue plate stabiliseer die skinkbordomgewing, wat OSFP-transceivers toelaat om hitte effektief af te voer via koelblokke.

Technical FAQ

+ Hoe bly die SE telling hanteerbaar op 9 216 vesels?
Deur ’n gelaagde kabelhiërargie te gebruik. Hoëveseltelling trunkerings vervang duisende individuele MPO pleisterkabels, wat die fisiese volume verminder en verkoelingsbelemmerings voorkom.
+ Wat is die '5:3 Blokkeringsfaktor' in die bergingsstofstruktuur?
Anders as die nie-blokkerende (1:1) berekeningsstofstruktuur, is die bergingsnetwerk opsetlik oorinteken. Dit verminder veselkoste en -kompleksiteit terwyl dit voldoen aan die 40GB/s per-node vereiste vir berging. Ontplooiing gebruik dikwels NVIDIA-versoenbare MPO pleisterkabels.
+ Waarom is die interne NVLink stofstruktuur veselvry?
NVIDIA gebruik ’n passiewe koper rugplaat en kabelpatrone binne die NVL72 rak. Dit elimineer duisende optiese transceivers en vesels, wat kragverbruik en latensie aansienlik verminder. Optiese vesel is gereserveer vir die skaal-uit berekeningsstofstruktuur.
+ Wat gebeur wanneer ons na 16 Skaalbare Eenhede skaal?
Op die 16-SE skaal (9 216 GPU’s) bereik die totale aktiewe veseltelling vir die berekeningsstofstruktuur alleen 18 432 stringe. Die bestuur van hierdie digtheid vereis hoëdigtheidshuisings wat spesifiek ontwerp is vir hoëtelling optiese vesel en gesentraliseerde kerngroep-skakelargitekture.
+ Waarom word MPO-8 eerder as die standaard MPO-12 gebruik?
Moderne 400G NDR en 800G XDR transceivers gebruik 4-baan of 8-baan parallelle optika. ’n 8-vesel MPO-belyning pas perfek by die 4x Tx en 4x Rx konfigurasie. Die gebruik van 8-vesel aktiewe MPO trunkerings elimineer ‘donker’ of vermorste vesels binne die cluster stofstruktuur.
+ Wat is die belangrikheid van APC (Angled Physical Contact) poleer?
Hoëspoed 100G-PAM4 sein is uiters sensitief vir terugrefleksies. Die 8-grade hoek van ’n APC-konnektor verseker dat gereflekteerde lig in die veselbekleding geabsorbeer word, wat die hoë Optiese Terugkeerverlies (OTV) handhaaf wat nodig is vir foutvrye KI-opleiding.
+ Hoe beïnvloed veseldigtheid vloeistofverkoelde KI-sale?
Selfs met vloeistofverkoelde skinkborde, moet lug steeds sirkuleer om sekondêre hitte te bestuur. Die gebruik van hoëdigtheid SmartRibbon-kabels verminder kabeldeursnee aansienlik, wat verseker dat die fisiese bekabeling nie lugvloei of vloeistofverkoelingsverdeelstukke belemmer nie.
+ Wat is die afstandbeperkings vir SE-vlak bekabeling?
Multimodus (OM4/OM5) is beperk tot 50 meter vir 400G/800G. Vir gesentraliseerde Spine-na-Kern skakels wat dit oorskry, is Enkelmodus G.657.A1 vesel verpligtend om verder reikafstand sonder seindegradasie te ondersteun.
+ Kan ek standaard buitekabel vir KI-datasentrum ruggrate gebruik?
Nee. Binneshuise KI-sale vereis LSZH (Lae Rook Nul Halogeen), Riser of Plenum om aan vereiste brandveiligheidsregulasies te voldoen, afhangende van plaaslike regulasies. Vir hoëdigtheidspaaie verskaf gespesialiseerde SlimCORE binnekabels die nodige stringtelling in ’n verminderde deursnee.
+ Wat is die voordeel van fabriek-getermineerde pigtails in die SE?
MPO koord optiese veselpigtails maak voorsiening vir vinnige massa-fusie splitsing by die Spine- of Kernlaag. Hierdie fabriek-beheerde terminasie aan die een kant bied die voordele van vooraf-terminasie, terwyl die ‘stom’ einde buigsaamheid bied om op terrein tot die vereiste lengte af te pas.

Argitekteer Jou KI Fabriek

ScaleFibre lewer vooraf-getermineerde kabeloplossings vir NVIDIA DGX SuperPOD ontplooiings.

Kontak Ons

Kry besonderhede oor hoë veseltelling trunkerings vir jou NVidia DGX SE.