QSFP-DD za gruče AI: Kako izbrati med 400G in 800G brez ugibanja

Aug 03, 2026

Pustite sporočilo

QSFP-DD je primeren za gručo AI, ko stikalo ali končna točka že uporablja izvorno kletko QSFP-DD, ko mora velika baza kvalificiranih QSFP-družinskih modulov in vlaken ostati v uporabi in ko lahko platforma ohladi izbrane module z vsemi zasedenimi vrati. To je napačno izhodišče, ko so strežniki GPU in stikala zgrajeni okoli izvornih kletk OSFP ali ko optika, ki jo dejansko potrebujete, zahteva več toplotnega prostora, kot jim ga lahko zagotovi gostitelj.

Faktor oblike ni prva odločitev. To je približno četrti. Zasnova omrežja, ki preživi prvo produkcijsko usposabljanje, se začne s strežniškimi vmesniki, številom tirnic, ciljno topologijo, sprejemljivim razmerjem prekomerne naročnine in izmerjeno kabelsko traso. Šele takrat je pomembna oblika modula.

Ta vodnik vodi to naročilo od konca do konca z izračunom delovne zmogljivosti, tabelo-izbire povezav in zaporedjem preverjanja, ki ga lahko predate laboratorijski skupini.

AI cluster network with GPU servers, leaf-spine switches, and QSFP-DD links

Kateri faktor oblike bi morali izbrati?

Stanje končne točke Prva izbira za ocenjevanje
Oba konca izvorno QSFP-DD / QSFP-DD800 QSFP-DD
Oba se končata izvorno OSFP OSFP
Selitev z nameščene baze 400G QSFP QSFP-DD, če gostitelj podpira zahtevani način vrat
Visoko{0}}zmogljiva optika na platformi, katere izvorna kletka je OSFP OSFP
En konec OSFP, drugi QSFP-DD Kvalificiran navzkrižni-form-faktor DAC/AEC ali optična povezava z ujemajočim se PMD, hitrostjo voznega pasu in načinom FEC na obeh koncih

Osnovno pravilo je kratko:izberite kletko, ki je izvorna za končno točko, nato preverite hitrost električnega pasu, optični vmesnik, način FEC, razred moči in vdelano programsko opremo za to natančno številko dela.Vse spodaj je delo, ki je potrebno za pošteno uporabo tega pravila.

Pet odločitev po vrsti

Večina slabih sestav omrežij z umetno inteligenco izvira iz sprejemanja teh odločitev iz zaporedja - najprej izberemo modul in pozneje odkrijemo omejitev. Vsak spodnji korak hrani naslednjega in vsak spremeni, kaj lahko kupite v naslednjem koraku.

  1. Potrdite končne točke.Izvorna vrsta kletke in način protokola na obeh koncih vsake povezave.
  2. Izračunajte kapaciteto.Vrata na vozlišče, na tir, nato pa zmogljivost povezave navzdol in navzgor pri vašem ciljnem razmerju preseženih naročnin.
  3. Izberite fizično povezavo.Izmerjena dolžina poti, rastlina vlaken, konektor, zahteva za preboj.
  4. Potrdite številko dela.FEC, hitrost voznega pasu, razred moči, vdelana programska oprema, revizija CMIS, kvalifikacija prodajalca.
  5. Razmesti glede na domeno napake.Najprej laboratorij, nato ena omarica, tirnica ali razširljiva enota naenkrat.

1. korak: ločite faktor oblike, protokol in optični vmesnik

Te tri stvari se nenehno združujejo v eno odločitev in ta sesutje je tisto, od koder izvira večina presenečenj glede združljivosti. So ločeni sloji z ločenimi upravnimi dokumenti.

Faktor oblikedoloča mehanske dimenzije, konektor gostitelja, električne pasove, obnašanje upravljanja in toplotno zasnovo. TheQSFP-DD Specifikacija strojne opreme MSApokriva mehanske, električne in toplotne zahteve, njegove kasnejše revizije pa razširjajo ista osem{0}}pasovna gostiteljska vrata na različice 800G in 1,6T, hkrati pa ohranjajo združljivost za nazaj z družino QSFP. Če želite mehansko in upravljavsko ozadje, preden nadaljujete, našQSFP-DD tehnični pregledpodrobno pokriva sam faktor oblike.

Protokol- Ethernet, RoCEv2 ali InfiniBand - določajo omrežna kartica, ASIC stikala, vdelana programska oprema in konfiguracija vrat, ne pa oblika kletke. Modul QSFP-DD nikoli ne bi smel biti opisan kot "podpira tako Ethernet kot InfiniBand" kot lastnost faktorja oblike. Ta zmožnost pripada gostitelju in jo je treba potrditi na določenih vratih.

Optični vmesnik- DR8, FR4, SR8, LR - opisuje organizacijo pasov, doseg in uporabo. Ne opisuje konektorja, števila vlaken, preslikave preboja ali stopnje električnega pasu. Dva modula, ki nosita isto optično oznako, se lahko razlikujeta v vsakem od njih. Samo signalizacijo definira IEEE, ne MSA:IEEE Std 802.3df-2024dodal parametre MAC in fizične plasti za delovanje 800 Gb/s in dodatnih 400 Gb/s PHY.

Obnašanje vodstva je četrta, tišja plast. Oba modula QSFP-DD in OSFP se upravlja prek CMIS, revizija pa je pomembna za vedenje posodobitve vdelane programske opreme, izbiro aplikacije in časovno razporeditev gostiteljskega-modula. Objavljene revizije so navedene vsporazumi o izvajanju OIF.

2. korak: Omrežje določite glede na vrata strežnika, ne glede na število GPU

Število GPE vam pove, kako velika je gruča. Ne pove vam, kaj mora omrežje prenašati, ker omrežje vedno vidi samo strežniške vmesnike.

Dva primera povesta bistvo. Sistem NVIDIA DGX H100/H200 izpostavlja osem vmesnikov ConnectX-7 compute-fabric s hitrostjo do 400 Gb/s vsak – vendar to ni osem fizičnih kletk. Referenčna arhitektura SuperPOD prikazuje predstavljeno računalniško strukturoštirje sprejemno-sprejemniki z dvema-vratoma, ki dosegajo vseh osem grafičnih procesorjev. DGX B300, nasprotno, predstavljaosem omrežnih vrat na pladnju GPEki služi osmim vmesnikom ConnectX-8 s hitrostjo do 800 Gb/s. Enako število grafičnih procesorjev, popolnoma drugačen inventar vrat, število kablov in račun za optiko.

Preden si torej ogledate podatkovni list posameznega stikala, dokumentirajte za vsako vrsto vozlišča: vrata za izračun-fabric, hitrost vrat, preslikavo NIC-v-GPU ali tirnico, izvorno vrsto kletke, podprte načine protokola ter ločeni vmesniki za shranjevanje in upravljanje. Ta inventar, ne številka GPU, je vnos za vsak naslednji izračun.

Izračun delovne zmogljivosti

Vzemimo razširljivo enoto 32 vozlišč, od katerih ima vsako osem 400G računskih-vrat, ena vrata na tir, v zasnovi,-optimizirani za tirnice. Delajte eno tirnico naenkrat:

  • Zmogljivost povezave navzdol na list tirnice= 32 vozlišč × 1 vrata × 400G =12,8 Tb/s
  • Pri 1:1 (brez-blokiranja), zahtevana zmogljivost navzgornje povezave=12.8 Tb/s → 12.800 ÷ 800 =16 × 800G povezav navzgor
  • Pri 2:1, zahtevana zmogljivost navzgornje povezave=6.4 Tb/s →8 × 800G povezav navzgor

Nato preverite rezultat glede na preklopni radiks: 32 povezav navzdol in 16 povezav navzgor potrebuje 48 uporabnih vrat na tem listu, kar takoj omejuje vašo izbiro preklopa. Dodajte povezave za redundanco in vzdrževanje ter ponovite na tir - osem tirnic, osem skupin listov, ne eno skupno število. Tu si 800G zasluži svoje mesto ali pa ne: tukaj prepolovi število vrat za navzgornjo povezavo, kar je argument radixa in ne argument pasovne širine.

Rail{0}}optimizirane, uravnotežene maščobne-tkanine so vzorčni dokumenti NVIDIA za velike vadbene gruče -DGX H100 SuperPOD referenčna arhitekturauporablja polno debelo-drevo z osmimi računalniškimi povezavami na-sistem. Ali ta vzorec ustreza vaši delovni obremenitvi, je presoja načrtovalca, vendar zgornja metoda izračuna velja ne glede na topologijo.

3. korak: načrtujte vse štiri tkanine, nato pa se vrnite k modulom

Grozd AI ni eno omrežje. Referenčni arhitekturi DGX SuperPOD sta ločeniračunanje, shranjevanje,-inband upravljanje in-out-outband upravljanjetkanine in vsaka proizvaja svoja vrata in optične zahteve.

Theračunska tkaninaizvaja gradientno izmenjavo, sinhronizacijo parametrov, kolektivne in oddaljene pomnilniške operacije. Ima najstrožje zahteve glede zakasnitve, zastojev in-simetrije poti, in tam je argument 800G-v primerjavi s 400G dejansko poravnan.

Thetkanina za shranjevanjeprenaša podatke o usposabljanju, kontrolne točke in artefakte modela. Njegova zmogljivost je odvisna od formata nabora podatkov, stopnje zadetkov v predpomnilniku, vzporednosti-nalagalnika podatkov, pogostosti kontrolnih točk in intenzivnosti metapodatkov -, zato "400 G zadostuje za shranjevanje" ni varna privzeta možnost. Referenčne arhitekture določajo zmogljivost shranjevanja na sistemski ravni in jo ohranjajo zunaj računalniške strukture natančno tako, da se delovni obremenitvi ne moreta poškodovati.

Thev-omrežju za upravljanje pasuizvaja zagotavljanje, promet razporejevalnika, registre, repozitorije in spremljanje. Theizvenpasovno-omrežje-doseže BMC, vrata za upravljanje stikal in napajanje omare ter mora ostati dosegljiva, medtem ko je proizvodna struktura pokvarjena. Obravnavajte ga kot obnovitveno in varnostno pot z lastno navzgornjo povezavo, ne kot ostanke-prometa nizke hitrosti.

Pri izbiri modula je praktična posledica naslednja: vsaka tkanina prispeva svoje lastno število vrat, svoj profil razdalje in lastno vrsto kletke, ki se pogosto razlikujejo. Gruča je lahko OSFP pri računanju in QSFP-DD pri shranjevanju in upravljanju, ne da bi bilo kaj narobe.

4. korak: Izberite 400G ali 800G iz omejitve, ne iz trenda

Vrata 800G podvojijo nazivno zmogljivost. Ne zmanjša prometa, ki ga ustvari vaša aplikacija. Njegova vrednost je skoraj vedno strukturna - manj povezav, boljša učinkovitost radiksa ali izvorna končna točka 800G.

400G ostaja boljša izbirako so računske končne točke izvirno 400G, trenutna struktura že izpolnjuje svoj cilj blokiranja, gruča raste znotraj razpoložljivega radixa, kvalificiran modul 400G in osnova kablov že obstaja ali pa je zaradi omejitev napajanja in hlajenja 800G neprivlačno. Uporaba 800Gnavzgornje povezavenad strežniki 400G je še vedno povsem razumno -, vendar ga upravičite z zgornjo aritmetiko vrat, ne z oznako.

800G izboljša dizajnko strežniki izpostavijo izvorne vmesnike 800G, ko se mora veliko tokov 400G združiti v manj hrbteničnih povezav, ko je število vrat stikala zavezujoča omejitev ali ko preboj z 800G na podrejene vmesnike z nižjo-hitrostjo poenostavi selitev. Natančno povedano: 800G lahko zmanjša število fizičnih povezav ali preklopnih vratv načrtih, kjer sta združevanje in radiks omejujoči omejitvi. To ne velja kot naravni zakon.

Comparison of 400G and 800G AI cluster network architectures

Za mešano-hitrostno selitev je potrebna izrecna dokumentacija

Preboj je kraj, kjer mešani{0}}hitrostni načrti tiho odpovejo. Zaradi sodobnih omrežnih vmesnikov je to nastavljivo in ne fiksno - ConnectX-8 NVIDIAdokumentacija o delitvi vrat-prikazuje eno samo kletko 800G OSFP, ki se prekonfigurira v dve vrati 400GbE ali osem vrat 100GbE, pri čemer je za vsako potrebna sprememba konfiguracije-na ravni vdelane programske opreme in cikel napajanja. Ta prilagodljivost obstaja le, če jo je prodajalec preizkusil in objavil.

Načrt selitve mora torej navesti za posamezna vrata: katera vrata delujejo s kakšno hitrostjo, ali gostitelj podpira predvideni način preboja, hitrost električnega pasu na obeh koncih, ali je preboj logični, optični ali kabel-temelji, način FEC, ki ga potrebuje vsak podrejeni vmesnik, ali je mogoče ponovno uporabiti obstoječe število vlaken in vrsto priključka ter kako bo spremljanje identificiralo posamezna podrejena vrata. Če vstavite modul z nižjo-hitrostjo, ne bo na voljo vsak način gostitelja.

QSFP-DD proti OSFP

Faktor odločitve QSFP-DD OSFP
Družinska združljivost-QSFP Native, kjer gostitelj podpira način Možno za nekatere module prek namensko izdelanega adapterja-
Velikost modula Manjša Večje
Toplotna zasnova Zasnova-hladilnega telesa; preveri pri polni populaciji Integriran ali jahalni hladilnik; MSA določa višje razrede moči
Običajna uporaba-sistema z umetno inteligenco Ethernetna stikala, mešane{0}}hitrostne platforme Več visoko{0}}zmogljivih platform GPE in InfiniBand
Odločitveno pravilo Dajte prednost, če so končne točke izvorni QSFP-DD in ponovna uporaba QSFP je pomembna Dajte prednost, če so končne točke izvorni OSFP ali če optika potrebuje svojo močnostno ovojnico

Dve trditvi je treba omejiti. Prvič, "OSFP nima združljivosti za nazaj" je preširoko -OSFP MSAdokumentira združljivost QSFP prek namenskega adapterja, njegova specifikacija modula pa opredeljuje višje razrede moči in integrirane-možnosti hladilnega telesa, ki dajejo OSFP toplotni ugled. Drugič, ta ugled je zgornja meja specifikacije in ne jamstvo. Ali lahko določeno ohišje dejansko poganja module razreda 30 W-v vsaki kletki, je odvisno od zasnove kletke, smeri pretoka zraka, vstopne temperature, politike ventilatorja, zmanjšanja moči sosednjih-vrat in lastnih omejitev prodajalca sistema.

Zato o popolni-termični validaciji naseljenosti ni-mogoče pogajati: modul, ki gre skozi ena vrata, lahko preseže svojo temperaturno mejo ohišja-, ko je prižganih vseh 32 ali 64 vrat, in še enkrat, ko odpove ventilator ali napajalnik. Preizkusite napolnjen sistem pri vaši dejanski vstopni temperaturi.

Če je strežnik OSFP in je stikalo QSFP-DD, se uprite refleksu standardizacije. Adapterji dodajajo mehanski odmik, pretok zraka, moč, celovitost-signala, inventar in podporo. Kvalificiran navzkrižni-kabel-faktorja oblike ali optična povezava z ustreznim PMD in FEC na vsakem koncu je pogosto čistejši od zamenjave strojne opreme, da se oblike ujemajo.

QSFP-DD and OSFP transceivers compared by size and thermal design

5. korak: Izberite povezavo glede na izmerjeno razdaljo in obstoječe vlakno

Zmogljivost in končne točke so zdaj popravile hitrost vrat in kletko. Razdalja in nameščena vlaknarna popravita vse ostalo. Kot inženirsko vodilo in ne kot pravilo je najkrajša tehnično veljavna povezava običajno najpreprostejša za uporabo -, vendar so fleksibilnost, premer kabla, uporabnost in zahteve po prelomu vse v nasprotju s tem.

Pot Tipična možnost Kaj potrditi
Intra{0}}rack, zelo kratek Pasivni DAC Točna dolžina in vrsta kabla sta podprta na obeh koncih; radij upogiba; teža
Kratek, vendar več kot pasivni baker AEC / ACC Poraba energije, dodana zakasnitev, blokada zračnega toka, kvalifikacija prodajalca, podpora za način vrat
Kratek optični, sprejemljiva fiksna dolžina AOC Možnost servisiranja - okvara zamenja celoten sklop
Večmodni, v-vrsti do sosednje-vrste Vzporedna optika razreda SR- Razred vlaken in meje dosega; glej našeVodnik za omejitve razdalje OM1–OM5
Enojni-način, pod-kilometrski, želen preboj Vzporedna optika razreda DR- Velikost MPO, polarnost, poliranje APC/UPC, preslikava preboja
En-način, kilometrsko merilo FR-dvojni ali vzporedni razred, odvisno od izdelka Vrsta priključka se razlikuje glede na številko dela; razred vlaken - primerjajOS1 in OS2 eno-optično vlakno

Implementacija konektorja je tukaj past, ker ni implicirana z optično oznako. Prodajalci pošiljajo izdelke 800G DR8 z dvojnim MPO-12 ali enojnim MPO-16 povezljivostjo in 2 km izdelke razreda FR s paralelnim MPO ali dvojnim dupleksom LC. Obe varianti sta legitimni; potrebujejo popolnoma drugačne kable. Preden naročite prtljažnike, premišljeno rešite vprašanje konektorja - našeVodnik za izbiro MTP proti MPOzajema mehanske razlike in razlike v polariteti terMPO prelomni vodnik kablazajema raz-preslikavo ventilatorja, od katere so odvisna prebojna vrata.

Še dva elementa spadata v isti pogovor. Izgubo kanala je treba določiti glede na specifikacijo modula s preštetimi konektorji in spoji, ne predpostavljenimi - glejkako se vnesene izgube kopičijo v optičnih omrežjih. Strukturirane kable med vrsticami je lažje vzdrževati, če so zgrajeni na vnaprej-končanihMPO/MTP magistralni kabliz dokumentirano metodo polarnosti namesto terenskih{0}}sestavljenih izvedb. Kjer se uporabljajo dupleksne povezave FR, kakovost končne površine konektorja neposredno povzroči povratno izgubo; theVodnik za priključek LCzajema, kaj pregledati.

Za vsako povezavo zabeležite: kletko gostitelja, hitrost voznega pasu gostitelja, konfigurirano hitrost vrat, PMD ali vrsto kabla, priključek, vrsto in število vlaken, največjo izgubo kanala, način FEC, preslikavo preboja, aplikacijsko kodo modula, zahteve CMIS in vdelane programske opreme, največjo moč in status kvalifikacije. Ta zapis na-povezavo je vreden več kot katero koli splošno pravilo o tem, katera optika kam gre.

AI network interconnect options from DAC cables to duplex optics

RoCEv2 ali InfiniBand: o tem se odločite neodvisno

Izbira protokola je pravokotna glede na faktor oblike in jo je treba izvesti na podlagi operativnih razlogov.

RoCEv2ustreza organizacijam, ki že uporabljajo Ethernet v velikem obsegu, s preverjenimi funkcijami RoCE na preklopni platformi in ekipo, ki lahko lasti QoS, nadzor prezasedenosti, telemetrijo in konfiguracijo gostitelja. Opozorilo je, da "omogoči PFC in ECN" ni načrt uvajanja. Dokumentacija NVIDIA Cumulus Linux opisujeRoCE kot kompleksna konfiguracijaobsega vmesna področja, klasifikacijo prometa, preslikavo prioritet, pragove PFC in ECN ter razporejanje, z načinom brez izgub, ki uporabljata PFC in ECN skupaj, in načinom z izgubami, ki uporablja samo ECN -, in ugotavlja, da se konfiguracija, ustvarjena za eno generacijo ASIC stikala, ne prenese na drugo.

InfiniBandustreza uvedbam po potrjeni arhitekturi prodajalca, kjer je integrirano upravljanje tkanin dragoceno in ekipa že ima orodje in strokovno znanje.

Izbira temelji na preizkušenem obnašanju aplikacije, operativnih sposobnostih, mejah podpore in celotni zasnovi sistema. Odstotki trženjske uspešnosti so odvisni od topologije, različice programske opreme, velikosti sporočila, stanja prezasedenosti in konfiguracije omrežne kartice ter se redko prenesejo v drugo gručo.

Validacija: kaj preizkusiti, preden kupite veliko

Reprezentativni laboratorijski test zajema štiri področja in vrstni red je pomemben - najprej stabilnost povezave, ker so številke o zmogljivosti iz nestabilne povezave nesmiselne.

Prikliči-:hladen zagon, topel ponovni zagon, vstavljanje in odstranjevanje modula, onemogočanje/omogočanje vrat, ustvarjanje in odstranjevanje prekinitev ter ponovni zagon obeh koncev v različnih zaporedjih.Celovitost signala:pre-FEC BER, popravljeno in nepopravljivo število FEC, napake-na ravni voznega pasu, PRBS ali BERT, kjer je podprto, optična oddajna in sprejemna moč, temperatura ohišja modula in število-loput povezav pod toplotno obremenitvijo.Učinkovitost:trajna prepustnost, kolektivi in ​​velikosti sporočil, ki jih vaša delovna mesta dejansko uporabljajo, hkratni več{0}}železniški promet, incast, shranjevanje-plus-računalništvo in dolgotrajno namakanje.Napaka:enojna povezava, listno stikalo, hrbtenična povezava, obnovitev-napajalnega cikla, zamenjava kabla in modula, upravljanje-izgube poti.

Zabeležite pragove, ne samo opravil/neuspešno. Nepopravljive napake FEC bi morale biti enake nič na zdravi povezavi; pre-stopnje napake FEC bi morale biti precej znotraj določenega roba modula in tam ostati, ko se temperatura ohišja dvigne med namakanjem. Povezava, ki se po 48-urnem namakanju giblje navzgor, je povezava, ki v proizvodnji ne bo uspela.

Nato uvedite po domeni napake - eno omaro, eno vodilo, en par listov ali eno razširljivo enoto naenkrat - in spremljajte spremembe stanja povezave, popravljena in nepopravljiva števila FEC, temperaturo modula, optično moč, aktivnost premora PFC, označevanje ECN, zasedenost čakalne vrste in komunikacijski čas-na ravni opravila. Povezava, ki še vedno deluje, je lahko še vedno ponižujoča; naraščajoča popravljena-napaka in trendi temperature so prvo opozorilo, ki ga prejmete.

Trije oblikovalski scenariji

Razširitev obstoječe mreže 400G Ethernet.Ustrezna stikala QSFP-DD 400G in strukturno kabliranje so že nameščeni; nova vozlišča izpostavijo 400G. Ohranite-povezave, obrnjene proti strežniku, pri 400G, zaženite zgornji izračun navzgornje povezave, da preizkusite razmerje blokiranja, in uvedite 800G samo tam, kjer kupi učinkovitost hrbteničnih vrat. Ponovno uporabite kvalificirano optiko in vlakna, kjer koli to dopušča proračun za izgube, in pred nakupom preverite vsako mešano-hitrostno konfiguracijo. To odločitev vodi preklopni radikal, ne število GPE.

Gradnja 800G-native grozda.Strežniki izpostavljajo izvorni 800G. Sledite potrjeni topologiji prodajalca strežnika, izberite stikala z ujemajočo se izvorno kletko, preverite polno-toplotno zmogljivost naseljenosti pri vaši vhodni temperaturi, izberite medsebojno povezavo med izmerjenimi dolžinami poti in potrdite vsako kombinacijo preboja in FEC pred izvedbo. Tu je 800G upravičeno s samo končno točko.

Življenje z dvema faktorjema oblike.Strežniki so OSFP; del preklopnega posestva Ethernet je QSFP-DD. Primerjajte kvalificirane sklope DAC ali AOC z navzkrižnim{2}}form-faktorjem, optično interoperabilnost z različnimi kletkami na vsakem koncu, odobrene adapterje, posledice za napajanje in toploto, rezervni inventar in lastništvo podpore. Zamenjava ene strani zgolj zaradi standardizacije oblike modula je pogosto dražja od delovanja dokumentiranega mešanega okolja.

Sedem napak, ki povzročajo predelavo

  • Začenši s številom GPE.Ne opisuje števila omrežnih kartic, preslikave železniških povezav, stopnje pristanišč ali prevelike naročnine. Izračunaj iz strežniških vmesnikov.
  • Ob predpostavki, da je 800G hitrejši za vsako delo.Pomaga samo tam, kjer ga lahko uporabljajo končne točke, topologija in prometni vzorec. Primerjajte kolektive, ki jih dejansko vodite.
  • Obravnava QSFP-DD kot protokol.To je kletka. Ločeno preverite kletko, protokol, električni način, optiko in FEC.
  • Ignoriranje tkanin za shranjevanje in upravljanje.Hitro računalniško tkivo ne more nadomestiti počasne dostave kontrolnih točk ali nedosegljivega BMC.
  • Branje optične oznake kot specifikacije kablov.DR8 in FR4 ne določata priključka, števila vlaken ali zasnove preboja. Uporabite natančne številke delov in diagram kablov.
  • Testiranje enega pristanišča.Poln-pretok zraka in vstopna temperatura sta pravi test.
  • Navajanje odstotkov uspešnosti brez metode.Objavite topologijo in testno metodo ali opustite številko.

Gradnja TCO modela, ki ga lahko branite

Kapitalski stroški zajemajo NIC ali DPU, stikala za listje in hrbtenico, oddajnike, DAC, AEC in AOC, optična vlakna in popravke, stojala in upravljanje kablov, testno opremo in rezervne dele. Operativni stroški pokrivajo napajanje modula in stikala, hlajenje, nadzor, kvalifikacijo vdelane programske opreme, usposabljanje, nadomestno delo in podporo prodajalca. Stroški tveganja - običajno izpuščeni - zajemajo napake pri združljivosti, zakasnitev uvajanja, toplotno zmanjšanje, nestabilnost povezave, ponovno-kabliranje, prekinjena usposabljanja in podaljšan čas obnovitve.

Združljivost s prejšnjimi različicami resnično zmanjša stroške, vendar je treba prihranek izračunati na podlagi posebne opreme, ki jo je mogoče ponovno uporabiti pri zahtevani hitrosti in načinu. Združljivost -faktorja oblike sama po sebi ne zagotavlja, da lahko trenutni ASIC, PCB, kletka, hladilni sistem, vdelana programska oprema ali proračun za napajanje poganjajo naslednjo generacijo. Prihodnjo hitrostno selitev obravnavajte kot vprašanje platforme, ne kot vprašanje povezovalnika.

Pogosto zastavljena vprašanja

Ali je QSFP-DD primeren za gruče za usposabljanje AI?

Da, ko je izviren za izbrano stikalo ali končno točko, izpolnjuje toplotne zahteve pri polni populaciji vrat ter podpira zahtevani način vrat in optični vmesnik. Samo nazivna hitrost prenosa podatkov ni razlog za izbiro.

Koliko grafičnih procesorjev potrebuje 800G omrežje?

Ni praga GPU. Izračunajte na podlagi omrežnih vrat na strežnik, hitrosti vrat, preslikave tirnic, topologije, cilja prevelike naročnine in prometa aplikacij - metoda v 2. koraku zgoraj.

Je QSFP-DD boljši od OSFP?

Nobeden ni univerzalno boljši. QSFP-DD ponuja izvorno združljivost QSFP-družine in manjši odtis; Specifikacija OSFP opredeljuje višje razrede moči in integrirane-možnosti hladilnega telesa ter je izvorna za več visoko{4}}zmogljivih platform AI. Odloča končna točka.

Ali lahko vrata OSFP uporabljajo modul QSFP?

Nekatere izvedbe OSFP podpirajo module QSFP prek odobrenega adapterja, vendar je treba preveriti združljivost, napajanje, način vrat in podporo prodajalca za določeno platformo.

Ali je QSFP-DD mogoče uporabiti za Ethernet in InfiniBand?

Faktor oblike ne določa protokola. Gostiteljska vrata, omrežna kartica, stikalo, vdelana programska oprema, kabel in oddajnik-sprejemnik morajo podpirati predvideni način delovanja.

Kateri oddajnik/sprejemnik 800G naj uporabim?

Začnite z izmerjeno razdaljo, kletko končne točke, zahtevanim prelomom, vrsto vlakna, priključkom, hitrostjo voznega pasu, načinom FEC, razredom moči in kvalifikacijo prodajalca. Ime optičnega vmesnika samo po sebi ne zadostuje.

Ali združljivost s prejšnjimi različicami QSFP-DD zagotavlja enostavno nadgradnjo na 1.6T?

Ne. Gostiteljska vrata lahko sprejmejo modul mehansko, medtem ko ASIC, tiskano vezje, kletka, hlajenje ali proračun za napajanje ne morejo podpirati nove hitrosti voznega pasu. Preverite na ravni platforme.

Preden podpišete naročilnico

Potrdite kletko končne točke na obeh koncih vsake vrste povezave; število in hitrost vrat-fabric na vozlišče; kartiranje železniškega prometa in ciljno razmerje prevelikega števila prijav; število vrat listov in hrbtenice, vključno z redundanco; zahteve vseh štirih tkanin; način delovanja in, za RoCE, zasnova popolnega{1}}nadzora zastojev; izmerjena kabelska pot in posledična izbira medsebojnega povezovanja; konektor, polarnost in proračun izgub; FEC in prebojni način; moč modula glede na toplotne omejitve-polne populacije; združljivost vdelane programske opreme in CMIS; status kvalifikacije prodajalca; in laboratorijske rezultate za BER, zmogljivost, prezasedenost, okvaro in preizkušanje zastoja.

QSFP-DD dobro podpira razširljivo 400G ali 800G strukturo AI. Še vedno je le ena komponenta zasnove. Začnite s končnimi točkami in prometnim modelom, izračunajte topologijo, izberite fizično povezavo iz izmerjene razdalje in potrdite sestavljeni sistem, preden opravi usposabljanje.

Metodologija in obseg

Ta vodnik se opira na tri vrste virov, ki so v zgornjem besedilu namenoma ločeni.Standardi in dokumenti MSA- IEEE 802.3df, specifikacije strojne opreme QSFP-DD in OSFP MSA ter sporazumi o implementaciji OIF CMIS - opredeljujejo faktorje oblike, signalizacijo in vedenje upravljanja.Dokumentacija prodajalca- Sistemski vodniki NVIDIA DGX, referenčne arhitekture DGX SuperPOD, ConnectX-Opombe o konfiguraciji 8 vrat in dokumentacija RoCE za Cumulus Linux - so navedeni kot primer za posameznega prodajalca, ne kot univerzalno vedenje; druge platforme se razlikujejo.Inženirske smernice- nasvet o zaporedju, prednost krajših povezav, pragi za preverjanje - so operativna priporočila, pridobljena iz prakse uvajanja, in so označena kot taka, ne pa predstavljena kot specifikacija.

 

Pošlji povpraševanje