QSFP-DD za AI klastere: Kako odabrati između 400G i 800G bez nagađanja

Aug 03, 2026

Ostavite poruku

QSFP-DD dobro odgovara klasteru umjetne inteligencije kada sklopka ili krajnja točka već koristi izvorni QSFP-DD kavez, kada velika baza kvalificiranih QSFP-obiteljskih modula i vlakana mora ostati u funkciji i kada platforma može hladiti odabrane module sa svakim popunjenim portom. To je pogrešna početna točka kada su GPU poslužitelji i preklopnici izgrađeni oko izvornih OSFP kaveza ili kada optika koju zapravo trebate zahtijeva više toplinskog prostora nego što im host može dati.

Faktor forme nije prva odluka. Otprilike je četvrti. Dizajn mreže koji preživi svoju prvu obuku proizvodnje počinje sa sučeljima poslužitelja, brojem tračnica, ciljnom topologijom, prihvatljivim omjerom prekomjerne pretplate i izmjerenom trasom kabela. Tek tada je bitan oblik modula.

Ovaj vodič vodi tu narudžbu od kraja do kraja, s izračunom radnog kapaciteta, tablicom za-odabir veze i nizom provjere valjanosti koji možete predati laboratorijskom timu.

AI cluster network with GPU servers, leaf-spine switches, and QSFP-DD links

Koji faktor oblika odabrati?

Stanje krajnje točke Prvi izbor za procjenu
Oba kraja nativno QSFP-DD / QSFP-DD800 QSFP-DD
Oba kraja nativno OSFP OSFP
Migracija s instalirane 400G QSFP baze QSFP-DD, pod uvjetom da host podržava traženi način porta
Optika-jake snage na platformi čiji je izvorni kavez OSFP OSFP
Jedan kraj OSFP, drugi QSFP-DD Kvalificirani cross{0}}form-factor DAC/AEC ili optička veza s odgovarajućim PMD-om, lane rate i FEC načinom rada na oba kraja

Osnovno pravilo je kratko:odaberite kavez koji je izvorni za krajnju točku, zatim provjerite brzinu električne trake, optičko sučelje, FEC način rada, klasu snage i firmware za točan broj dijela.Sve ispod je rad koji je potreban za poštenu primjenu tog pravila.

Pet odluka, redom

Većina loših konstrukcija AI mreže proizlazi iz donošenja ovih odluka izvan niza - prvo odabir modula i kasnije otkrivanje ograničenja. Svaki korak ispod hrani sljedeći, a svaki mijenja ono što možete kupiti u koraku nakon njega.

  1. Potvrdite krajnje točke.Izvorni tip kaveza i način rada protokola na oba kraja svake veze.
  2. Izračunajte kapacitet.Priključci po čvoru, po tračnici, zatim kapacitet silazne veze i uzlazne veze prema vašem ciljnom omjeru prekomjerne pretplate.
  3. Odaberite fizičku vezu.Izmjerena duljina rute, postrojenje vlakana, konektor, zahtjev za probijanje.
  4. Potvrdite broj dijela.FEC, stopa trake, klasa snage, firmware, CMIS revizija, kvalifikacija dobavljača.
  5. Implementacija po domeni kvara.Prvo laboratorij, zatim jedan stalak, tračnica ili skalabilna jedinica odjednom.

Korak 1: Odvojite Form Factor, Protocol i Optical Interface

Te se tri stvari stalno skupljaju u jednu odluku, a iz tog kolapsa nastaje većina iznenađenja kompatibilnosti. Oni su zasebni slojevi s zasebnim upravljačkim dokumentima.

Faktor oblikadefinira mehaničke dimenzije, glavni konektor, električne trake, ponašanje upravljanja i toplinski dizajn. TheQSFP-DD MSA hardverska specifikacijapokriva mehaničke, električne i toplinske zahtjeve, a njegove kasnije revizije proširuju isti host port s osam-traka na 800G i 1.6T varijante, zadržavajući kompatibilnost s QSFP obitelji. Ako želite mehaničku i upravljačku pozadinu prije nego što krenete dalje, našQSFP-DD tehnički pregleddetaljno pokriva sam faktor oblika.

Protokol- Ethernet, RoCEv2 ili InfiniBand - odlučuje NIC, ASIC preklopnika, firmware i konfiguracija priključka, a ne oblik kaveza. QSFP-DD modul nikada ne bi trebao biti opisan kao "podržava i Ethernet i InfiniBand" kao svojstvo faktora forme. Ta mogućnost pripada glavnom računalu i mora se potvrditi na određenom priključku.

Optičko sučelje- DR8, FR4, SR8, LR - opisuje organizaciju traka, doseg i primjenu. Ne opisuje konektor, broj vlakana, mapiranje proboja ili brzinu električne trake. Dva modula koja nose istu optičku oznaku mogu se razlikovati u svakom od njih. Samu signalizaciju definira IEEE, a ne MSA:IEEE Std 802.3df-2024dodao je MAC parametre i fizičke slojeve za 800 Gb/s rad i dodatnih 400 Gb/s PHY.

Ponašanje menadžmenta je četvrti, tiši sloj. I modulima QSFP-DD i OSFP upravlja se putem CMIS-a, a revizija je važna za ponašanje ažuriranja firmvera, odabir aplikacije i vrijeme-modula hosta. Objavljene revizije navedene su usporazumi o provedbi OIF-a.

Korak 2: Odredite veličinu mreže prema portovima poslužitelja, a ne prema broju GPU-a

Broj GPU-a govori vam koliko je velik klaster. Ne govori vam što mreža mora nositi, jer mreža uvijek vidi samo sučelja poslužitelja.

Dva primjera govore o tome. NVIDIA DGX H100/H200 sustav izlaže osam ConnectX-7 compute-fabric sučelja do 400 Gb/s svako - ali to nije osam fizičkih kaveza. Referentna arhitektura SuperPOD-a prikazuje predstavljenu računsku strukturučetiri dvo{0}}primopredajnika koji dopiru do svih osam GPU-a. DGX B300, nasuprot tome, predstavljaosam mrežnih priključaka na ladici GPU-aopslužuje osam ConnectX-8 sučelja pri brzini do 800 Gb/s. Isti broj GPU-a, potpuno drugačiji inventar priključaka, broj kabela i račun za optiku.

Dakle, prije nego što pogledate podatkovnu tablicu jednog preklopnika, dokumentirajte za svaku vrstu čvora: računalne-fabric portove, brzinu porta, mapiranje NIC-na-GPU ili tračnicu, izvornu vrstu kaveza, podržane načine protokola, plus zasebna sučelja za pohranu i upravljanje. Taj inventar, a ne broj GPU-a, ulaz je za svaki izračun koji slijedi.

Izračun radnog kapaciteta

Uzmimo skalabilnu jedinicu od 32 čvora, svaki s osam 400G računalnih-priključaka, jedan priključak po tračnici, u rail-optimiziranom dizajnu. Radite jednu po jednu šinu:

  • Kapacitet silazne veze po listu tračnice= 32 čvorova × 1 priključak × 400G =12,8 Tb/s
  • U omjeru 1:1 (bez-blokiranja), potrebni uzlazni kapacitet=12.8 Tb/s → 12,800 ÷ 800 =16 × 800G uplinkova
  • Kod rezultata 2:1, potreban uplink kapacitet=6.4 Tb/s →8 × 800G uplinkova

Zatim provjerite rezultat prema osnovi preklopnika: 32 silazne veze plus 16 uzlaznih veza treba 48 upotrebljivih portova na tom listu, što odmah ograničava vaš izbor preklopnika. Dodajte veze za redundanciju i održavanje i ponovite po tračnici - osam tračnica, osam grupa listova, a ne jedan zbirni broj. Ovdje 800G zarađuje svoje mjesto ili ne: ovdje prepolovljuje broj priključaka za uplink, što je argument radixa, a ne argument širine pojasa.

Rail-optimizirane, uravnotežene masne-tkanine su uzor NVIDIA dokumenata za velike klastere za obuku -DGX H100 SuperPOD referentna arhitekturakoristi puno masno-stablo s osam računalnih veza po-sustavu. Odgovara li taj obrazac vašem opterećenju ovisi o dizajnu, ali gornja metoda izračuna vrijedi bez obzira na topologiju.

Korak 3: Isplanirajte sve četiri tkanine, a zatim se vratite na module

AI klaster nije jedna mreža. DGX SuperPOD referentne arhitekture su odvojeneračunanje, pohrana, unutar-pojasno upravljanje i-izvan-pojasno upravljanjetkanine, a svaki proizvodi vlastiti priključak i optiku.

Thecompute fabricnosi gradijentnu razmjenu, sinkronizaciju parametara, kolektivne i udaljene memorijske operacije. Ima najstrože zahtjeve za kašnjenjem, zagušenjem i-simetrijom putanje, i tu je zapravo riješen argument 800G-prema-400G.

Thetkanina za pohranunosi podatke o obuci, kontrolne točke i artefakte modela. Njegov kapacitet ovisi o formatu skupa podataka, stopi pogodaka predmemorije, paralelizmu-učitavača podataka, učestalosti kontrolnih točaka i intenzitetu metapodataka - zbog čega "400G je dovoljno za pohranu" nije sigurna zadana postavka. Referentne arhitekture određuju performanse pohrane na razini sustava i drže ih izvan računalne strukture točno tako da dva radna opterećenja ne mogu oštetiti jedno drugo.

Theu-mreži za upravljanje pojasomnosi opskrbu, raspoređivač prometa, registre, repozitorije i nadzor. Themreža izvan--pojasadopire do BMC-ova, portova za upravljanje prekidačem i napajanja stalka, i mora ostati dostupan dok je proizvodna tkanina pokvarena. Tretirajte ga kao put oporavka i sigurnosti s vlastitom uzlaznom vezom, a ne kao preostali-promet niske brzine.

Za odabir modula, praktična posljedica je sljedeća: svaka tkanina doprinosi vlastitim brojem priključaka, vlastitim profilom udaljenosti i vlastitim tipom kaveza, a oni su često različiti. Klaster može biti OSFP na računanju i QSFP-DD na pohrani i upravljanju, a da ništa nije u redu.

Korak 4: Odaberite 400G ili 800G iz ograničenja, a ne iz trenda

800G priključak udvostručuje nominalni kapacitet. Ne smanjuje promet koji vaša aplikacija stvara. Njegova je vrijednost gotovo uvijek strukturna - manje veza, bolja radix učinkovitost ili izvorna 800G krajnja točka.

400G ostaje bolji izborkada su računalne krajnje točke izvorno 400G, trenutna tkanina već ispunjava svoj cilj blokiranja, klaster raste unutar dostupnog radixa, već postoji kvalificirani 400G modul i baza kablova ili ograničenja napajanja i hlađenja čine 800G neprivlačnim. Korištenje 800Guzlazne vezeiznad 400G poslužitelja i dalje je savršeno razumno -, ali opravdajte ga gornjom aritmetikom priključka, a ne oznakom.

800G poboljšava dizajnkada poslužitelji izlože izvorna 800G sučelja, kada se mnogi 400G tokovi moraju agregirati u manje kralježničkih veza, kada je broj portova prekidača obvezujuće ograničenje ili kada prelazak s 800G na manje{3}}brzinska podređena sučelja pojednostavljuje migraciju. Precizno rečeno: 800G može smanjiti broj fizičkih veza ili portova prekidačau dizajnu gdje su agregacija i radix ograničavajuća ograničenja. To ne čini kao zakon prirode.

Comparison of 400G and 800G AI cluster network architectures

Mješovita-brzinska migracija zahtijeva eksplicitnu dokumentaciju

Proboj je mjesto gdje-dizajni različitih brzina potiho ne uspijevaju. Moderne mrežne kartice čine ovo podesivim, a ne fiksnim - NVIDIA-in ConnectX-8port{0}}splitting dokumentacijaprikazuje jedan 800G OSFP kavez koji se rekonfigurira u dva 400GbE porta ili osam 100GbE porta, a svaki zahtijeva promjenu konfiguracije-razine firmvera i ciklus napajanja. Ta fleksibilnost postoji samo tamo gdje ju je prodavač testirao i objavio.

Dakle, plan migracije bi trebao navesti, po priključku: koji priključci rade kojom brzinom, podržava li host planirani način rada, brzinu električne trake na oba kraja, je li proboj logički, optički ili-kabelski, FEC način rada koji je potreban svakom podređenom sučelju, može li se postojeći broj vlakana i tip konektora ponovno upotrijebiti i kako će praćenje identificirati svaki podređeni priključak. Umetanje modula niže-brzine ne čini svaki način hosta dostupnim.

QSFP-DD u odnosu na OSFP

Faktor odluke QSFP-DD OSFP
QSFP-obiteljska kompatibilnost Izvorni, gdje host podržava način rada Moguće za neke module kroz namjenski{0}}adapter
Veličina modula Manji Veći
Toplinski dizajn Dizajn-rashladnog hladnjaka; potvrditi kod pune populacije Integrirani ili pokretni hladnjak; MSA definira više klase snage
Uobičajena upotreba AI-sustava Ethernet preklopnici, platforme-mješovite brzine Nekoliko -GPU i InfiniBand platformi visokih performansi
Pravilo odlučivanja Radije kada su krajnje točke izvorni QSFP-DD i ponovna upotreba QSFP-a je važna Radije kada su krajnje točke izvorni OSFP ili kada optika treba njegovu omotnicu snage

Dvije tvrdnje treba ograničiti. Prvo, "OSFP nema povratnu kompatibilnost" je preširoko -OSFP MSAdokumentira kompatibilnost s QSFP-om putem namjenskog adaptera, a njegove specifikacije modula definiraju više klase snage i opcije integriranog-hladnjaka koje OSFP-u daju toplinsku reputaciju. Drugo, taj ugled je gornja granica specifikacije, a ne jamstvo. Može li određena šasija stvarno pokrenuti module klase od 30 W-u svakom kavezu ovisi o dizajnu kaveza, smjeru protoka zraka, ulaznoj temperaturi, politici ventilatora, smanjenju snage susjednog-priključka i vlastitim ograničenjima dobavljača sustava.

Zbog toga se o punoj-termalnoj validaciji-naseljenosti ne može pregovarati: modul koji prolazi kroz jedan priključak može premašiti svoje-temperaturno ograničenje kućišta kada su sva 32 ili 64 priključka upaljena, i opet kada ventilator ili napajanje pokvare. Testirajte napunjeni sustav, na vašoj stvarnoj ulaznoj temperaturi.

Ako je poslužitelj OSFP, a prekidač QSFP-DD, oduprite se refleksu standardizacije. Adapteri dodaju mehanički zazor, protok zraka, snagu, integritet-signala, inventar i podršku. Kvalificirani kabel-faktora-forme ili optička veza s odgovarajućim PMD i FEC na svakom kraju često je čišći od zamjene hardvera kako bi se oblici uskladili.

QSFP-DD and OSFP transceivers compared by size and thermal design

Korak 5: Odaberite vezu prema izmjerenoj udaljenosti i postojećem vlaknu

Kapacitet i krajnje točke sada su fiksirali brzinu priključka i kavez. Udaljenost i instalirana fibernica popravljaju sve ostalo. Kao inženjerska smjernica, a ne kao pravilo, najkraća tehnički valjana veza obično je najjednostavnija za rukovanje -, ali fleksibilnost, promjer kabela, upotrebljivost i zahtjevi za prekidom su protiv toga.

Ruta Tipična opcija Što potvrditi
Intra-rack, vrlo kratak Pasivni DAC Točna duljina i vrsta kabela podržani na oba kraja; polumjer savijanja; težina
Kratak, ali iznad pasivnog bakra AEC / ACC Potrošnja energije, dodana latencija, blokada protoka zraka, kvalifikacija dobavljača, podrška za način priključka
Kratak optički, prihvatljiva fiksna duljina AOC Mogućnost servisiranja - kvar zamjenjuje cijeli sklop
Višemodni, od-reda do susjednog-reda SR-klasa paralelne optike Klasa vlakana i granice dosega; vidi našeOM1–OM5 vodič za ograničenja udaljenosti
Pojedinačni-mod, pod-kilometar, traži se proboj Paralelna optika klase DR- Veličina MPO, polaritet, poliranje APC/UPC, mapiranje proboja
Pojedinačni-način, kilometraža FR-klasa dvostruka ili paralelna, ovisno o proizvodu Vrsta konektora razlikuje se prema broju dijela; klasa vlakana - usporedbaOS1 i OS2 jedno-modno vlakno

Implementacija konektora ovdje je zamka, jer nije implicirana optičkom oznakom. Dobavljači isporučuju 800G DR8 proizvode s dvostrukom MPO-12 ili jednom MPO-16 vezom i proizvode 2 km FR klase s paralelnim MPO-om ili dvostrukim dupleksom LC. Obje varijante su legitimne; potrebno im je potpuno drugačije kabliranje. Prije naručivanja prtljažnika, namjerno riješite pitanje konektora - našeMTP vs MPO vodič za odabirpokriva mehaničke razlike i razlike u polaritetima, iMPO vodilica kabela za probijanjepokriva fan{0}}mapiranje o kojem ovise prekidni priključci.

Još dvije stavke pripadaju istom razgovoru. Gubitak kanala mora se proračunati u odnosu na specifikaciju modula s prebrojanim konektorima i spojevima, a ne pretpostavljenim - vidikako se uneseni gubitak nakuplja u optičkim mrežama. Strukturirano kabliranje između redaka lakše je održavati ako je izgrađeno na unaprijed-završetkuMPO/MTP magistralni kabelis dokumentiranom metodom polariteta umjesto-sastavljenih radova na terenu. Tamo gdje se koriste dvostruke FR veze, kvaliteta na kraju konektora izravno uzrokuje povratni gubitak; theVodič za LC konektorpokriva što pregledati.

Za svaku vezu zabilježite: kavez hosta, stopu trake hosta, konfiguriranu brzinu porta, PMD ili tip kabela, konektor, vrstu i broj vlakana, maksimalni gubitak kanala, FEC način rada, mapiranje proboja, aplikacijski kod modula, zahtjeve CMIS-a i firmvera, maksimalnu snagu i status kvalifikacije. Taj zapis po-vezi vrijedi više od bilo kojeg općeg pravila o tome koja optika gdje ide.

AI network interconnect options from DAC cables to duplex optics

RoCEv2 ili InfiniBand: odlučite ovo neovisno

Odabir protokola je ortogolan faktoru oblika i treba ga napraviti na temelju operativnih razloga.

RoCEv2odgovara organizacijama koje već koriste Ethernet na velikom broju, s potvrđenim RoCE značajkama na komutacijskoj platformi i timom koji može posjedovati QoS, kontrolu zagušenja, telemetriju i konfiguraciju hosta. Upozorenje je da "omogući PFC i ECN" nije plan implementacije. NVIDIA Cumulus Linux dokumentacija opisujeRoCE kao složena konfiguracijaobuhvaća skup međuspremnika, klasifikaciju prometa, mapiranje prioriteta, PFC i ECN pragove i raspoređivanje, s načinom rada bez gubitaka koji koristi PFC i ECN zajedno i načinom rada s gubitkom koji koristi samo ECN - i napominje da se konfiguracija generirana za jednu generaciju ASIC-a prekidača ne prenosi na drugu.

InfiniBandodgovara implementacijama koje slijede potvrđenu arhitekturu dobavljača, gdje je integrirano upravljanje tkaninom vrijedno, a tim već ima alate i stručnost.

Temeljite izbor na testiranom ponašanju aplikacije, operativnim vještinama, granicama podrške i ukupnom dizajnu sustava. Postoci marketinške izvedbe ovise o topologiji, verziji softvera, veličini poruke, stanju zagušenja i NIC konfiguraciji, a rijetko se prenose u drugi klaster.

Provjera valjanosti: Što testirati prije kupnje u količini

Reprezentativni laboratorijski test pokriva četiri područja, a redoslijed je bitan - prvo stabilnost veze, jer su brojke o izvedbi nestabilne veze besmislene.

Dovedite-gore:hladno pokretanje, toplo ponovno pokretanje, umetanje i uklanjanje modula, onemogućavanje/omogućavanje priključka, stvaranje i uklanjanje prekida i ponovno pokretanje oba kraja u različitim sekvencama.Integritet signala:pre-FEC BER, ispravljeni i nekorektivi FEC brojevi, pogreške-na razini traka, PRBS ili BERT gdje su podržani, optička snaga prijenosa i prijema, temperatura kućišta modula i-brojevi preklopa veze pod toplinskim opterećenjem.Performanse:održivu propusnost, kolektive i veličine poruka koje vaši poslovi zapravo koriste, istodobni više{0}}željeznički promet, incast, pohranu-plus-računalnu nadmetanje i dugo stajanje.Neuspjeh:jednostruka veza, lisnati prekidač, kralježnička veza, oporavak-ciklusa napajanja, zamjena kabela i modula, upravljanje-gubitkom staze.

Zabilježite pragove, a ne samo prolaz/pad. Neispravljive FEC pogreške trebale bi biti nula na ispravnoj vezi; stope pre-FEC pogreške trebale bi biti unutar specificirane margine modula i ostati tamo dok temperatura kućišta raste tijekom namakanja. Karika koja raste prema gore tijekom 48-satnog namakanja je karika koja neće uspjeti u proizvodnji.

Zatim postavite prema domeni kvara - jedan stalak, jednu šinu, jedan par listova ili jednu skalabilnu jedinicu u isto vrijeme - i pratite promjene stanja veze, FEC ispravljene i nepopravljive brojeve, temperaturu modula, optičku snagu, aktivnost PFC pauze, ECN označavanje, popunjenost reda čekanja i vrijeme-komunikacije na razini posla. Veza koja još uvijek radi može i dalje biti degradirajuća; rastuća ispravljena-pogreška i temperaturni trendovi su najranije upozorenje koje dobijete.

Tri scenarija dizajna

Proširenje postojeće 400G Ethernet mreže.Kvalificirani QSFP-DD 400G preklopnici i strukturno kabliranje već su postavljeni; novi čvorovi izlažu 400G. Održavajte-veze okrenute prema poslužitelju na 400G, pokrenite gornji izračun uzlazne veze kako biste testirali omjer blokiranja i uvedite 800G samo tamo gdje kupuje učinkovitost kralježničnog priključka. Ponovno upotrijebite kvalificiranu optiku i vlakna gdje god proračun za gubitke dopušta i provjerite svaku konfiguraciju mješovitog-proboja brzine prije kupnje. Switch radix pokreće ovu odluku, a ne broj GPU-a.

Izgradnja 800G-nativnog klastera.Poslužitelji izlažu izvorni 800G. Slijedite validiranu topologiju dobavljača poslužitelja, odaberite preklopnike s odgovarajućim izvornim kavezom, provjerite toplinski kapacitet pune-naseljenosti na vašoj ulaznoj temperaturi, odaberite interkonekciju iz izmjerenih duljina ruta i potvrdite svaku kombinaciju proboja i FEC-a prije nego što počnete. Ovdje je 800G opravdano samom krajnjom točkom.

Živjeti s dva faktora oblika.Poslužitelji su OSFP; dio Ethernet preklopnog posjeda je QSFP-DD. Usporedite kvalificirane DAC ili AOC sklopove-form-faktora, optičku interoperabilnost s različitim kavezima na svakom kraju, odobrene adaptere, implikacije napajanja i topline, rezervni inventar i vlasništvo podrške. Zamjena jedne strane isključivo radi standardizacije oblika modula često je skuplja od rada u dokumentiranom mješovitom okruženju.

Sedam pogrešaka koje uzrokuju preradu

  • Počevši od broja GPU-a.Ne opisuje broj NIC-a, mapiranje željeznica, stopu porta ili prekomjernu pretplatu. Izračunajte iz sučelja poslužitelja.
  • Pod pretpostavkom da je 800G brži za svaki posao.Pomaže samo tamo gdje ga krajnje točke, topologija i obrazac prometa mogu koristiti. Usporedite kolektive koje zapravo vodite.
  • Tretiranje QSFP-DD kao protokola.To je kavez. Odvojeno provjerite kavez, protokol, električni način rada, optiku i FEC.
  • Zanemarivanje tkanina za pohranu i upravljanje.Brza računalna mreža ne može kompenzirati sporu isporuku kontrolne točke ili nedostupni BMC.
  • Čitanje optičke oznake kao specifikacije kabliranja.DR8 i FR4 ne navode konektor, broj vlakana ili dizajn proboja. Koristite točne brojeve dijelova i dijagram kabliranja.
  • Testiranje jednog priključka.Puni-protok zraka i ulazna temperatura pravi su test.
  • Navođenje postotaka učinka bez metode.Objavite topologiju i metodu testiranja ili izbacite broj.

Izgradnja TCO modela koji možete obraniti

Kapitalni troškovi pokrivaju NIC-ove ili DPU-ove, leaf i spine sklopke, primopredajnike, DAC-ove, AEC-ove i AOC-ove, optičke spojeve i krpanje, regale i upravljanje kabelima, opremu za testiranje i rezervne dijelove. Operativni troškovi pokrivaju napajanje modula i prekidača, hlađenje, nadzor, kvalifikaciju firmvera, obuku, zamjenski rad i podršku dobavljača. Troškovi rizika - oni koji se obično izostavljaju - pokrivaju kvarove kompatibilnosti, kašnjenje implementacije, toplinsko smanjenje, nestabilnost veze, ponovno-postavljanje kablova, prekinute poslove obuke i produženo vrijeme oporavka.

Kompatibilnost s prethodnim verzijama stvarno smanjuje troškove, ali ušteda se mora izračunati na temelju specifične opreme koja se može ponovno koristiti potrebnom brzinom i načinom rada. Kompatibilnost -faktora forme sama po sebi ne jamči da trenutni ASIC, PCB, kavez, rashladni sustav, firmware ili proračun za napajanje mogu pokretati sljedeću generaciju. Tretirajte buduću brzinsku migraciju kao pitanje platforme, a ne pitanje konektora.

Često postavljana pitanja

Je li QSFP-DD prikladan za klastere za obuku AI?

Da, kada je nativni za odabranu sklopku ili krajnju točku, zadovoljava toplinske zahtjeve pri punoj populaciji priključaka i podržava traženi način rada priključka i optičko sučelje. Nazivna brzina prijenosa podataka sama po sebi nije razlog za odabir.

Koliko GPU-a zahtijeva 800G umrežavanje?

Ne postoji GPU prag. Izračunajte na temelju mrežnih priključaka po poslužitelju, brzine priključaka, mapiranja željeznice, topologije, cilja prekomjerne pretplate i prometa aplikacije - metodom u koraku 2 iznad.

Je li QSFP-DD bolji od OSFP-a?

Niti jedno nije univerzalno bolje. QSFP-DD nudi izvornu QSFP{2}}kompatibilnost s obitelji i manji otisak; OSFP-ova specifikacija definira više klase snage i opcije integriranog-hladnjaka, a izvorna je za nekoliko platformi AI visokih-performansi. Krajnja točka odlučuje.

Može li OSFP port koristiti QSFP modul?

Neke implementacije OSFP-a podržavaju QSFP module putem odobrenog adaptera, ali kompatibilnost, napajanje, način priključka i podrška dobavljača trebaju provjeriti za određenu platformu.

Može li se QSFP-DD koristiti i za Ethernet i za InfiniBand?

Faktor oblika ne određuje protokol. Glavni priključak, NIC, sklopka, firmware, kabel i primopredajnik moraju podržavati predviđeni način rada.

Koji 800G primopredajnik trebam koristiti?

Počnite od izmjerene udaljenosti, kaveza krajnje točke, potrebnog proboja, vrste vlakna, konektora, brzine trake, FEC načina rada, klase snage i kvalifikacije dobavljača. Naziv optičkog sučelja nije dovoljan sam po sebi.

Jamči li QSFP-DD kompatibilnost s prethodnim verzijama jednostavnu nadogradnju na 1.6T?

Ne. Glavni priključak može mehanički prihvatiti modul dok ASIC, PCB, kavez, hlađenje ili proračun napajanja ne mogu podržati novu stopu trake. Potvrdite na razini platforme.

Prije nego potpišete narudžbenicu

Potvrdite kavez krajnje točke na oba kraja svake vrste veze; broj i brzina računalnih-fabric priključaka po čvoru; mapiranje željeznica i ciljni omjer prekomjerne pretplate; broj otvora listova i kralježnice uključujući redundanciju; zahtjevi sve četiri tkanine; način rada i, za RoCE, dizajn-potpune kontrole zagušenja; izmjerena trasa kabela i rezultirajući izbor međusobnog povezivanja; proračun konektora, polariteta i gubitaka; FEC i način proboja; snaga modula protiv toplinskih ograničenja pune-populacije; firmware i CMIS kompatibilnost; status kvalifikacije dobavljača; i laboratorijske rezultate za BER, izvedbu, zagušenje, kvarove i ispitivanje usisavanja.

QSFP-DD dobro podržava skalabilnu 400G ili 800G AI tkaninu. To je još uvijek samo jedna komponenta dizajna. Započnite s krajnjim točkama i prometnim modelom, izračunajte topologiju, odaberite fizičku vezu iz izmjerene udaljenosti i potvrdite sastavljeni sustav prije nego što izvrši posao obuke.

Metodologija i opseg

Ovaj se vodič oslanja na tri vrste izvora, a oni su namjerno razdvojeni u gornjem tekstu.Standardi i MSA dokumenti- IEEE 802.3df, QSFP-DD i OSFP MSA hardverske specifikacije i sporazumi o implementaciji OIF CMIS - definiraju faktore oblika, signalizaciju i ponašanje upravljanja.Dokumentacija dobavljača- NVIDIA DGX sistemski vodiči, DGX SuperPOD referentne arhitekture, ConnectX-Napomene o konfiguraciji s 8 priključaka i Cumulus Linux RoCE dokumentacija - se navodi kao primjer specifičan za dobavljača, a ne kao univerzalno ponašanje; druge platforme se razlikuju.Inženjerske smjernice- savjeti za slijed, preferencija za kraće veze, pragovi provjere - su operativne preporuke izvučene iz prakse implementacije i označene su kao takve, a ne predstavljene kao specifikacija.

 

Pošaljite upit