100G QSFP28 Spine-Lehden muotoilu: Vältä porttivirheet

Jun 10, 2026

Jätä viesti

100G spine-leaf data center fabric with QSFP28 links

100 Gt:n selkä-lehtikangas on yksi luotettavimmista tavoista yhdistää 25G-palvelimet, 100G-uplinkit, tallennusklusterit ja itä{4}}länsi-raskaita työkuormia nykyaikaisessa palvelinkeskuksessa. QSFP28:n vetovoima on sen joustavuus: yksi portti voi kuljettaa alkuperäisen 100G-linkin tai jakaa neljään 25G-palvelinyhteyteen, joten yksi kytkin voi palvella sekä liityntäreunaa että kankaan ydintä.

Nopeat kytkimet ovat helppo osa. 100G-malli elää tai kuolee ennen ostotilausta tehtyihin päätöksiin: miten kukin portti on allokoitu, miltä yliliittymäsuhde näyttää normaaleissa ja vikatilanteissa, mikä optiikka vastaa todellista kaapelinkulkua, kuinka paljon optiikat lisäävät lämpöä ja voiko kangas kasvaa kohti 400G:tä ilman trukin päivitystä.

Tämä opas on toimittaja{0}}neutraali suunnitteluohje verkko- ja infrastruktuuritiimeille. Alla olevat luvut noudattavat nykyisiä IEEE 802.3 Ethernet -spesifikaatioita ja asiaankuuluvia optisia moni-lähteitä koskevia sopimuksia, mutta jokaisella kytkimellä ja lähetin-vastaanottimella on oma tietolehtensä, joten varmista ostamasi laitteiston tarkat luvut.

Kuinka lukea tämän oppaan esimerkkejä.Ellei toisin mainita, ne olettavat yksittäisiä-kotipalvelimia, joissa kussakin on yksi 25G NIC, 48 isäntäporttia lehtiä kohden, 100G:n lehti---nousevat linkit, täysverkko, jossa jokainen lehti on yhteydessä jokaiseen selkään, ja eteenpäin suuntautuva virheenkorjaus on käytössä, jos optiikka sitä vaatii. Kaksois-homing, nopeammat verkkokortit tai erilaiset porttien määrät muuttavat jokaista seuraavaa numeroa.

Mikä on 100G Spine{1}}Leaf Network?

Spine{0}}leaf on kaksi-tasoinen palvelinkeskusarkkitehtuuri, joka on rakennettu lehtikytkimistä ja selkäkytkimistä. Leaf-kytkimet sijaitsevat jokaisen telineen yläosassa ja tarjoavat palvelimeen päin-portteja sekä ylöslinkkejä selkärankaan. Selkänojakytkimet muodostavat nopean{5}}selkärangan. Jokainen lehti liittyy jokaiseen selkään, joten telineiden välinen liikenne liikkuu lehdestä selkärangan toiselle samanpituista-polkua pitkin.

Suunnittelu on suosittu, koska se tarjoaa:

  • Ennustettava, yhtä pitkä matka minkä tahansa kahden telineen välillä
  • Alkuperäinen tuki raskaalle itä{0}}länsiliikenteelle
  • Kaikki uplinkit ovat aktiivisia ECMP:n kautta sen sijaan, että ne olisivat estetty virittävän puun avulla
  • Yksinkertainen vaakasuora skaalaus - lisää lehtiä porteille, lisää piikit kapasiteetin lisäämiseksi

100 Gt:n kudoksessa lehtien-ja-selkärangan linkit toimivat 100 Gt:lla, kun taas palvelin-portit toimivat 10 G, 25 G, 50 G tai 100 G työmäärästä riippuen. Nykyään 25G-yhteys 100G-uplinkeillä on yleisin yritysyhdistelmä.

Two-tier spine-leaf network topology

Fyysinen suunnittelu vs looginen suunnittelu

"Verkkosuunnittelu" kattaa kaksi kerrosta, jotka on helppo yhdistää. Tämä opas keskittyy fyysiseen ja kapasiteettikerroksen - portteihin, optiikkaan, ylitilaukseen, kaapelointiin -, koska siihen sitoudut ostaessasi laitteistoa. Mutta looginen kerros päättää, miten kangas välittää liikennettä, ja se muokkaa useita fyysisiä valintoja.

Fyysisellä puolella istuinkytkin ja porttivalinta, NIC-nopeudet, yliliittymä, optiikka, kaapelointi, virta ja jäähdytys. Loogisella puolella ECMP-kuormitus{1}}tasapainottaa nousevien linkkien välillä. peittokuva, kuten VXLAN, jossa on BGP EVPN -ohjaustaso monen vuokraajan kerrokselle 2 ja kerrokselle 3 reititetyn aluskerroksen päällä; kaksois-homing MLAG:lla tai MC-LAG:lla ja LACP:llä pääsyreunassa; ja verkkotunnuksen koon-virhe. RDMA-kankaille sinun on myös suunniteltava lähes häviötön verkko, joka käsitellään alla. Määritä looginen malli ajoissa, koska se vaikuttaa uplink-määrään, kuinka monta piikkiä haluat ECMP-leveydelle ja otetaanko lehtiä käyttöön MLAG-pareina.

Vaihe 1 - Määritä palvelimen nopeus ja työkuormitus

Aloita työmäärästä, älä optiikasta. Yleisellä virtualisointiklusterilla, tallennuskankaalla ja AI-harjoituspodilla on hyvin erilaiset tarpeet, ja oikea muotoilu seuraa liikennettä.

25G palvelimet 100G uplinkeillä

Useimmissa yritys- ja yksityisissä-pilviympäristöissä 25G-yhteys 100 Gt:n lehti-to-spine-uplinkeillä on paras paikka: suuri hyppy 10G:n yli pitäen verkkokortin, kaapelin ja kytkimen kustannukset kohtuullisina. Tyypillinen koontiversio yhdistää 25 Gt alaslinkit, 100 G nousevat linkit ja 2:1-3:1-suhteen yleistä laskentaa varten, ja pienempi ylitilaus on varattu tallennustilalle ja viiveherkille{13}tasoille. Se sopii virtualisointiin, yksityiseen pilveen, verkkotasoihin ja suurimpaan osaan yrityspalvelinkeskuksia.

Natiivi 100G tallennusta, tekoälyä ja HPC:tä varten

Jotkin työkuormat vaativat alkuperäisen 100 Gt:n palvelimelle: hajautettu ja NVMe-oF-tallennus, tekoäly- ja koneoppimiskoulutus, HPC, laajamittainen-analytiikka ja matala-viive RDMA. Tässä ylitilauksen tulee olla alhainen - usein ei--estävä tai lähellä sitä -, koska ongelma on liikennemalli, ei vain äänenvoimakkuus.

Tekoäly-, HPC- ja RDMA-työkuormat luovat tiheää, synkronoitua, kaikki{0}}kaikkiin idästä-länteen suuntautuvaa liikennettä: monet solmut lähettävät tietoa useisiin solmuihin samalla hetkellä, joten virtualisointikudoksen säästävä tilastollinen tasoitus ei enää päde. RDMA over Converged Ethernet (RoCE) lisää toisen rajoitteen, koska se odottaa lähes -häviötöntä kudosta, mikä käytännössä tarkoittaa PFC (Priority Flow Control) ja Explicit Congestion Notification (ECN) -viritettyä päästä päähän. Kangas, joka pudottaa kehyksiä ruuhkautuessa, seuraa RoCE-suorituskyvyn romahtamista, joten nämä klusterit rakennetaan yleensä suhteessa 1:1 huolellisella puskurin ja ruuhkan konfiguraatiolla.

Vaihe 2 - Lehti- ja selkäkytkinporttien laskeminen 100 G:n kankaalle

Portin suunnittelu alkaa lehdestä, ei selkärangasta. Työskentele palvelimilta ulospäin:

  1. Laske palvelin{0}}portit telinettä kohti.
  2. Päätä, ovatko kukin natiivi 25G, natiivi 100G vai erotuskaista.
  3. Varaa QSFP28-portit selkärangan uplinkeille.
  4. Lisää varaportteja kasvua, redundanssia, testausta ja vaihtoa varten.
  5. Laske ylitilaus uudelleen purkamisen jälkeen, ei ennen.

Laske palvelin{0}}portit

Määritä kullekin telineelle palvelinten määrä, NIC-nopeus, verkkokortit palvelinta kohden, yksi- tai kaksi-kotiverkkoa ja tarvittavat varaosat. 48 palvelimen teline, joissa on yksi 25 Gt verkkokortti, vaatii 48 isäntäporttia. Kaksois-koti nämä palvelimet lehtipariin ja parin pääsyporttien määrä kaksinkertaistuu.

Varaa uplink-portit ja katso kaksinkertainen määrä-

Varaa isäntäporttien jälkeen QSFP28-portit selkärangalle. Tässä piilee yleisin virhe: jos samoja QSFP28-portteja käytetään 4x25G-katkaisuun, ne eivät ole enää saatavilla uplink-linkkeinä. Suurin yksittäinen suunnitteluvirhe ei ole laskea väärin 100 Gt uplinkit, vaan yliarvioida nousevan siirtotien portit, jotka jäävät yli, kun purkautuminen on syönyt ne. Määritä purkaus ennen ylitilauksen matematiikkaa tai laskemasi suhde on fiktiota.

Toiminut esimerkki auttaa. Ota tavallinen 1U-lehti, jossa on 48 SFP28-isäntäporttia ja 8 QSFP28-porttia:

Kapasiteetti
48 x 25 G (SFP28) Yhden{0}}kotipalvelimen käyttö 1,200G
6 x 100 G (QSFP28) Selkärangan uplinkit 600G
2 x 100 G (QSFP28) Varattu: kasvu, varastointi tai vara -

Kun kuusi nousevaa linkkiä kuljettavat 1 200 Gt pääsyliikennettä, lehti kulkee 2:1 ja kaksi QSFP28-porttia pysyy varassa. Anna jokaiselle portille yksi, selkeä rooli laskentataulukossa ennen kuin muutat kokoa.

Jätä vapaata kapasiteettia

Älä syö jokaista porttia ensimmäisenä päivänä. Varaa liikkumavaraa uusille palvelimille, ylimääräisille spineille, väliaikaisille testilinkeille, epäonnistuneille-portinvaihdoille, seurantaan ja siirtoon. Pieni käyttämätön kapasiteetti on paljon halvempaa kuin uudelleensuunnittelu.

Vaihe 3 - Laske ylitilaus, mukaan lukien N-1

Ylitilaus vertaa palvelimen kokonaiskaistanleveyttä{0}}lehdellä sen ylälinkin kokonaiskaistanleveyteen:

Ylitilaussuhde=laskevan siirtotien kokonaiskaistanleveys / nousevan siirtotien kokonaiskaistanleveys

Yllä olevalle lehdelle 48 x 25 G=1, 200 G alas ja 6 x 100 G=600 G ylös, jolloin saadaan 1 200 / 600=2:1. Tämä tarkoittaa kaksi kertaa niin paljon teoreettista pääsyn kaistanleveyttä kuin nousevan siirtotien kaistanleveys - yleensä hyvä yleiseen laskemiseen, jossa palvelimet harvoin kaikki lähettävät linjanopeudella kerralla, mutta todellinen rajoitus tallennusta, tekoälyä, HPC:tä ja RDMA:ta varten.

Tarkista aina N-1-kotelo

Kangas voi näyttää terveeltä normaalikäytössä ja tukehtua vian aikana. Tarkastellaan lehtiä, joissa on kahdeksan 100 G nousevaa linkkiä jaettuna tasaisesti neljän piikin välillä - kaksi per selkä, yhteensä 800 G, joten 1 200 G pääsyä antaa 1,5:1. Menetä yksi selkä ja lehti putoaa kaksi nousevaa linkkiä 600G:iin, mikä painaa suhteen 2:1:een katkoksen ajaksi. Jos tavoitteesi on "ei huonompi kuin 2:1 jopa epäonnistuessa", sinun on aloitettava läheltä 1,5:1. Laske sekä normaalisuhde että N-1-suhde yhden selkärangan tai nousevan siirtotien menetyksen jälkeen; toinen numero on se, joka puree huollon aikana.

100G spine-leaf oversubscription planning example

Suunnittelualueet työmäärän mukaan

Ei ole olemassa yleismaailmallista suhdetta, joten pidä seuraavaa suunnittelualueina, ei standardeina, ja validoi mitattua liikennettä vastaan, jos voit:

Työmäärä Suunnittelun suunta
AI / HPC / RDMA 1:1 tai lähes -estoton
Hajautettu tallennustila 1:1 - 2:1
Yleinen virtualisointi 2:1 - 3:1
Verkko-/sovellustasot 3:1 tai enemmän, jos liikenne on ennakoitavissa
Kehittäjä / testi Kustannus-optimoidut suhteet hyväksyttävissä

Tarkista päivityksen yhteydessä nykyinen uplink-käyttö, huippu- ja itä{0}}lännen mallit, tallennusvirrat ja varaikkunat ennen kuin sitoudut suhteeseen.

Vaihe 4 - Valitse QSFP28-optiikka ja -kaapelit

QSFP{0}}G-liitännät ovat IEEE:n 802.3 - standardoimia802.3bm muutoslisätty 100 GBASE-SR4, yhden-moodin LR4 PHY:n rinnalle. Valitse optiikka etäisyyden, kuitutyypin, liittimen, tehon ja kytkimien yhteensopivuuden mukaan ja vältä oletusarvoisesti pisintä ulottuvuutta: kattavuus, jota et tarvitse, tarkoittaa yleensä kustannuksia ja tehoa, joita et tarvitse. Yhdistä moduuli ajoon järkevällä marginaalilla.

QSFP28 optics and cable options for 100G networks

DAC ja AOC lyhyille palvelinlinkeille

QSFP28-suora-kupariliitännät (DAC) ja aktiiviset optiset kaapelit (AOC) ovat käytännöllisiä teline- ja vierekkäisiin-telineliitäntöihin. Passiivinen DAC sopii lyhyimpiin hyppyihin - muutaman metrin - pienimmällä hinnalla ja teholla, kun taas AOC laajentaa ulottuvuutta ja on kevyempi ja joustavampi, kun kuparimassasta tulee ongelma. 25G-käytössä QSFP28-4x SFP28 Breakout DAC tai AOC on yleinen, kun kytkin tukee katkeamista.

100GBASE-SR4 lyhyille monimuotoisille uplinkeille

SR4 kuljettaa 100G ylikahdeksan rinnakkaista monimuotokuituakäyttämällä MPO/MTP-liitintä, mikä tekee siitä kustannus{0}}tehokkaan valinnan lyhyille lehdistä-ja-selkärangalle rivin sisällä. Sen kattavuus riippuu kuitulaadusta - noin 70 m OM3:lla ja 100 m OM:lla4 -, joten kannattaa tietää kattavuus, jota voit odottaaOM3, OM4 ja OM5 monimuotokuitulattiassasi. Suurin suunnittelurajoite on rinnakkaiskaapelointi: MPO-paikat ja napaisuus on selvitettävä etukäteen.

CWDM4 tai FR yksittäistilassa-juoksu noin 2 km:iin

Inter-rivi-, -huone- tai -hall-linkkejä varten yksi-moodioptiikka, kuten CWDM4 tai FR, sopii paremmin. The100G CWDM4 MSAmäärittää 2 km:n ulottuvuuden yhdelle yksimuotokuituparille, jossa on kaksisuuntainen LC-liitin ja FEC. Koska ne käyttävät kaksisuuntaista kuitua rinnakkaisen MPO:n sijasta, CWDM4- ja FR-optiikat putoavat usein yksi-moodilaitokseen puhtaammin kuin SR4 -, ja näillä etäisyyksilläOS1 ja OS2 yksimuotokuitu-alkaa olla merkitystä tappiobudjettillesi. Lyhyemmät yhden tilan-versiot, kuten DR, kattavat noin 500 m, missä se on kaikki mitä tarvitset.

100GBASE-LR4 kampukselle ja DCI:lle

LR4 on pitkän ulottuvuuden-vaihtoehto, joka kantaa 100 Gtjopa noin 10 kilometriä kaksisuuntaisen yksimuotokuitu-kuidun ylikampukselle, rakennukselle-kiinteistöön-tai tietokeskuksen-yhdistyslinkkejä-. Käytä sitä vain silloin, kun etäisyys todella vaatii sitä; Pitkä-optiikka lyhyillä intra-tietokeskuksen-sisäisillä hyppyillä lisää kustannuksia, tehoa ja lämpöä parantamatta kangasta.

QSFP{0}}G-optiikan vertailu

Taulukossa on yhteenveto, mihin kukin vaihtoehto sopii. Käsittele ulottuvuuksia tyypillisinä suunnittelulukuina ja vahvista tarkat luvut, kuitulaatu ja FEC-vaatimus kunkin moduulin tietolomakkeessa.

Vaihtoehto Media / kuitu Liitin Tyypillinen ulottuvuus Minne sopii
QSFP28 DAC (passiivinen kupari) Twinax kupari Integroitu ~1–3 m Telinepalvelimessa-tai lehdeltä-to-sivulle
QSFP28 AOC Multimode (integroitu) Integroitu ~30 m asti Vierekkäiset{0}}telinepalvelimet, lyhyet linkit
100GBASE-SR4 Rinnakkais monimuoto, 8 kuitua (OM3/OM4) MPO/MTP ~70 m OM3 / 100 m OM4 Lyhyt-rivinen lehti-ja-selkärangan
100G CWDM4 Kaksipuolinen yksi{0}}tila LC ~2 km asti -rivien/-salien väliset uplinkit
100GBASE-FR / DR Kaksipuolinen yksi{0}}tila LC ~500 m (DR) - ~2 km (FR) Keskipitkät yhden tilan{0}}käynnit
100GBASE-LR4 Kaksipuolinen yksi{0}}tila LC ~10 km asti Kampus / rakennus-to-rakennukseen / DCI

Työstetyt esimerkit: Pienet, keskikokoiset ja suuret kankaat

Nämä ovat yksinkertaistettuja suunnittelumalleja, eivät piirustuksia. Selkärangan lukumäärä valitaan yleensä jakamaan nousevat linkit tasaisesti ja asettamaan ECMP-leveys: kaksi piikkiä on käytännöllinen redundanssin minimi, neljä antaa hienomman N-1-rakeisuuden ja paremman kuorman jakautumisen, ja kahdeksan sopii suurille kankaille. Leaf count -asteikolla tarvitsemasi palvelinportit.

Pieni kangas

  • 8-lehtiset kytkimet
  • 2 selkäkytkintä
  • 48 x 25G palvelinporttia lehtiä kohden
  • 4 x 100 G uplinkiä lehtiä kohden
  • 384 yhden-kodin 25G-palvelinporttia

Lehteä kohden: 1 200 G alas, 400 G ylös, eli 3:1. Toimii yleiseen laskemiseen, mutta tiukka raskaaseen varastointiin tai tekoälyyn. Lisää ylöslinkkejä tai leikkaa pääsy lehtiä kohti, jos tarvitset pienemmän suhteen.

Keskikokoinen kangas

  • 16 lehtiä kytkintä
  • 4 selkäkytkintä
  • 48 x 25G palvelinporttia lehtiä kohden
  • 6 x 100 G uplinkiä per lehti
  • 768 yhden-kodin 25G-palvelinporttia

Per leaf: 1,200G down, 600G up, so 2:1. A solid balance for virtualization and enterprise workloads, and four spines spread ECMP better than two.

Suuri kangas

  • 32 lehtinen kytkin
  • 8 selkäkytkintä
  • 48 x 25G palvelinporttia lehtiä kohden
  • 8 x 100 G uplinkiä per lehti
  • 1 536 yksittäistä-kotikäyttöistä 25G-palvelinporttia

Lehteä kohden: 1 200 G alas, 800 G ylös, eli 1,5:1. Enemmän nousevan siirtotien ylätilaa, mutta enemmän optiikkaa, kuitua, kustannuksia, tehoa ja kaapelointia. Tässä mittakaavassa dokumentaatio on osa suunnittelua: merkinnät, porttikartat, napaisuus, varaoptiikka, ilmavirta ja valvonta on suunniteltava ennen asennusta.

QSFP28 Breakout Planning (100G - 4x25G)

Breakout on QSFP28-suunnittelun hyödyllisin ja väärinymmärretyin osa. Kun kytkin, kaapeli ja kokoonpano sen sallivat, yksi QSFP28-portti jakautuu neljään 25G SFP28 -linkkiin, jotka yhdistävät neljä 25G-palvelinta yhdestä 100G-portista. Se ansaitsee paikkansa, kun tarvitset suurta 25G-tiheyttä, sinulla on runsaasti QSFP28-portteja, haluat alentaa palvelinyhteyskohtaisia ​​kustannuksia tai rakennat siirtymävaiheen 25G/100G-kangasta käyttämällä QSFP28-4x SFP28 DAC:ta, AOC:tä taiMTP/MPO-katkoskaapelitetäisyydestä riippuen.

Sakka on, että purkautuminen kuluttaa QSFP28-portteja. Jos 32-portin QSFP28-kytkin varaa 16 porttia 4x25G-katkaisulle, nämä 16 porttia tukevat 64 palvelinta – mutta vain 16 QSFP28-porttia jää ylälinkkejä, tallennustilaa, yhteenliittämistä ja varaosia varten. Nyrkkisääntönä on, että lasketaan ensin purkausportit ja sitten lasketaan, mikä on jäljellä nouseville linkeille.

Ennen kuin sitoudut, vahvista muutama asia ja päätä hyvissä ajoin, pitäisikö jokaisen juoksun olla atavaratilan tai irrotettavan kokoonpanon:

  • Mitkä portit tukevat purkamista, ja onko olemassa portti{0}}ryhmärajoituksia?
  • Poistaako Breakoutin käyttöön ottaminen viereiset portit käytöstä?
  • Tukeeko kytkimen käyttöjärjestelmä tarvitsemaasi tilaa?
  • DAC-, AOC- tai breakout-optiikka jokaiselle ajolle?
  • Tarvitaanko kaikki neljä kaistaa nyt vai vasta myöhemmin?
  • Miten purkautuminen vaikuttaa tulevaan siirtymiseen alkuperäisiin 100G-palvelimiin?

Virran, jäähdytyksen ja kaapelin hallinta

100 G:n kangas tuottaa enemmän kuin kaistanleveyttä - se tuottaa lämpöä, ilmavirran kuormitusta ja kaapelitiheyttä. Tehobudjetoinnin tulisi kattaa kytkimien runko ja tuulettimet, QSFP28-optiset moduulit (ja DAC tai AOC, jos niitä käytetään), redundantit tarvikkeet, telinetason kapasiteetti ja kasvumarginaali. Jäähdytyksen tulisi ottaa huomioon kuuman- ja kylmän-käytävän asettelu, tasainen etu---taka--etu--ilmavirtaus, suojapaneelit, kaapelin tukkeutuminen, ympäristön lämpötila ja moduulin-lämpötilan valvonta, koska selkäranka on täynnä lämpökuormitusta.

Kaapelointi skaalautuu nopeasti: 16 lehteä 4 piikkiin on jo 64 lehden-ja-linkkejä, joista jokainen on merkittävä, reitittävä, testattava ja dokumentoitava. Täys-verkkokangas on paljon helpompi rakentaa ja ylläpitää, kun se on valmiiksi-suljettuMPO/MTP-runkokaapelointikuin kentällä{0}}päätetyllä kuidulla. Joukkueiden tulee myös selvittää liitin- ja napaisuussopimukset etukäteen; thekäytännön erot MTP:n ja MPO:n välilläkannattaa vahvistaa ennen tilaamista. Huolellinen dokumentointi ei maksa mitään ensimmäisenä päivänä ja paljon ensimmäisen käyttökatkon aikana.

Suunnittelu 400G päivitykseen

Suunnittele kangas realistisella päivityspolulla. Sinun ei tarvitse 400G kaikkialla ensimmäisenä päivänä, mutta sinun tulee välttää valintoja, jotka tekevät muuton myöhemmin kipeäksi. Ala miettiä 400 G:n valmiutta, kun selkärangan nousevat linkit ovat jo raskaasti kuormitettuja, kun 100 Gt:n kärkien lisääminen on hankalaa, kun ECMP-polkujen määrä lähestyy alustan rajoja tai kun tekoälyn, tallennustilan tai itä-lännen kasvu kiihtyy.

Tavallinen strategia on päivittää ensin selkä: lehdet säilyttävät 100 Gt:n nousevat linkit, kun taas suuremman-kapasiteetin selkärangan - käyttämällä portteja, kutenQSFP-DD- lisää liikkumavaraa, ja usein 400 Gt:n portit avautuvat 4x100 Gt takaisin olemassa olevia lehtiä kohti. Laajemman liikeradan asettaa toimiala:Ethernet Alliancen tiekarttanyt toimii 400 G, 800 G ja pidemmälle, suurelta osin tekoälyn ohjaamana. Kun arvioit kytkimiä, tarkista, että alusta tukee vaiheittaisen päivityksen tarvitsemia nopeuksia, optiikkaa, purkautumistiloja ja ohjelmisto-ominaisuuksia.

Kun 100 G:n-lehtien muotoilu ei ole oikea valinta

Tämä malli ei ole universaali, ja muutamat tapaukset vaativat jotain muuta. Kourallinen palvelimia yhdessä tai kahdessa telineessä harvoin oikeuttaa täyden selkä{1}}lehtirakenteen, jossa redundanttien kytkimien pari on yksinkertaisempaa ja halvempaa. Erittäin suuret tekoälyharjoitteluklusterit voivat ylittää 100 Gt:n pääsyn ja 100 G:n selkärangan kankaat, jotka käsittelevät hyvin ja laskeutuvat 400G- tai 800G-kankaille - tai jopa omaan InfiniBand-verkkoon - alusta alkaen. Ja jos melkein kaikki liikenne suuntautuu pohjoisesta-etelään yhdyskäytävään eikä itään-länteen telineiden väliin, idän-länsipuolen etujen-eduilla on vähemmän merkitystä, joten topologiaa tulee perustella kasvun ja toiminnan perusteella eikä oletuksena. Sovita arkkitehtuuri liikenteeseen ja mittakaavaan, älä päinvastoin.

Yleisiä 100 G:n selkärangan-virheitä lehtien suunnittelussa

  • QSFP28-porttien laskeminen kahdesti.Portti on joko 4x25G:n purku tai 100G uplink, ei koskaan molempia. Anna jokaiselle portille yksi rooli.
  • Optiikan valinta maksimaalisen ulottuvuuden mukaan.Pidempi ulottuvuus lisää kustannuksia ja tehoa; sovita optiikka todelliseen kuidun etäisyyteen ja tyyppiin.
  • N-1 huomioimatta.Tarkista suhde normaalin käytön aikana ja selkärangan menettämisen jälkeen.
  • Unohtaen optisen tehon ja lämmön.Selkä täynnä QSFP28-moduuleja on todellinen lämpökuorma, joten ota optiikka mukaan teho- ja jäähdytysmatematiikkaan.
  • Kaapeloinnin käsittely jälkikäteen.Reititys, merkinnät, napaisuus ja dokumentaatio kuuluvat suunnitteluun, ei asennukseen.
  • Suunniteltu vain tämän päivän palvelinnopeuteen.Jos 25G-käyttö vaihtuu 100G:ksi, jätä tilaa alkuperäiselle 100G:lle tai 400G:lle.

FAQ

K: Mikä on paras ylitilaussuhde 100 Gt:n spine{1}}verkossa?

V: Ei ole olemassa yhtä parasta suhdetta. Yleisessä laskennassa 2:1 tai 3:1 on usein käytännöllinen. Käytä tallennus-, tekoäly-, HPC- tai RDMA-työkuormia varten 1:1- tai pienempää-ylitilausmallia aina kun mahdollista ja validoi mitattua liikennettä vastaan.

K: Pitäisikö minun käyttää QSFP28 SR4:ää tai CWDM4:ää lehtien---linkkeihin?

V: Käytä SR4:ää lyhyisiin monimuotoajoihin, joissa MPO/MTP-kaapelointi on saatavilla. Käytä CWDM4:ää tai vastaavaa yksimoodi-optiikkaa, kun etäisyys on pidempi tai kun kaksisuuntaista LC-single-mode-laitosta suositellaan, noin 2 km:iin asti.

K: Voiko QSFP28 hajota 4x25G:ksi?

V: Kyllä, monet QSFP28-alustat tukevat 4x25G-katkaisua, mutta tuki riippuu kytkimen mallista, porttiryhmästä, käyttöjärjestelmästä ja kaapelityypistä. Tarkista aina kytkimien yhteensopivuusmatriisi ennen kuin suunnittelet purkamisen ympärille.

K: Onko 100 G:n selkä- vielä sen arvoinen nyt, kun 400 G on olemassa?

V: Kyllä, useimmissa yritys- ja pilviympäristöissä, joissa on 25G- tai 100G-palvelinyhteys. 400G ansaitsee korkeammat kustannukset, kun nousevan siirtotien kapasiteetti, tekoälyliikenne tai suuri -mittakaavainen itä-lännen kaistanleveys oikeuttaa sen.

K: Kuinka monta selkärangan kytkintä tarvitsen?

V: Vähintään kaksi irtisanomista varten. Suuremmat kankaat käyttävät usein neljää tai useampaa paremman ECMP-jakelun ja nousevan siirtotien kapasiteetin lisäämiseksi. Oikea määrä riippuu lehtien määrästä, uplink-nopeudesta, ylitilaustavoitteesta ja alustan rajoituksista.

K: Mikä on yleisin suunnitteluvirhe?

V: Porttivirhe. Työryhmät suunnittelevat ensin uplink-yhteydet ja huomaavat myöhemmin, että katkaisukaapelit kuluttivat QSFP28-portteja, joita he odottivat käyttävän selkärangassa. Määritä katkaisuportit ennen uplink-kapasiteetin viimeistelyä.

Johtopäätös

Hyvä 100 Gt:n selkä-leaf-muotoilu on ennen laitteiston saapumista tehtyjen päätösten summa: määritä työkuormitus, laske portit oikein, laske ylitilaus sekä normaaleissa että vikatilanteissa, valitse optiikat etäisyyden mukaan, suunnittele katkaiseminen tarkoituksella, budjetoi virtaa ja jäähdytystä ja jätä tilaa 400G:lle. Useimmissa yrityspalvelinkeskuksissa 25G-yhteys 100G QSFP28-uplinkeillä on edelleen vahva tasapaino suorituskyvyn, kustannusten ja mittakaavan välillä, kun taas tallennustila, tekoäly ja HPC vaativat yksinkertaisesti alhaisempaa ylitilausta ja tiukempaa validointia. Luotettava lähestymistapa ei muutu: suunnittele palvelimelta ulospäin, todista matematiikka normaaleissa ja N-1 olosuhteissa ja dokumentoi jokainen linkki ennen käyttöönottoa.

Lähetä kysely