Tudás

Az adatközponti lebontás a számítási, memória-, tárolás- és hálózatkezelést független, egyesített erőforrásokra választja szét, ahelyett, hogy rögzített szerverhatárokon belül zárná őket. Ez a szétválasztás új építészeti függőséget hoz létre: a készletek közötti összekötő rétegnek elegendő sávszélességet, elég alacsony késleltetést és elegendő elérést kell biztosítania ahhoz, hogy az egész rendszer egyetlen koordinált szövetként viselkedjen. Az optikai összekapcsolás az a szállítási technológia, amely egyre inkább betölti ezt a szerepet -, különösen ott, ahol a rézkapcsolatok elérik a távolság, a teljesítmény és a jelintegritás fizikai korlátait.

Ez a cikk elmagyarázza, hogy az optikai összekapcsolás hogyan támogatja a szétbontott architektúrákat, hol jobb teljesítményt nyújt a réznél, hogyan viszonyul a CXL-hez és a társ{0}}csomagolt optikához, és mikor van gyakorlati értelme ennek alkalmazása.

Mi az adatközponti lebontás?

A hagyományos szerverközpontú{0}}modellben a CPU, a memória, a tárhely és a hálózat egyetlen házon belül található. Veszel egy szervert, és mind a négy - fix arányát kapod, függetlenül attól, hogy a munkaterhelésnek szüksége van erre az arányra, vagy sem. Az adatközponti bontás szétválasztja ezt a köteget. Minden erőforrástípus saját készletbe van szervezve, és a munkaterhelések csak azt vonják le az egyes készletekből, amelyekre szükségük van egy megosztott hálón keresztül.

Ez azért fontos, mert a modern munkaterhelések ritkán vannak kiegyensúlyozottak. Egy nagy nyelvi modell betanítási feladat telítheti a GPU memóriáját és a kelet-nyugati sávszélességet, miközben alig érinti a helyi tárhelyet. A valós idejű analitikai folyamathoz hatalmas memóriakapacitásra lehet szükség, de csak mérsékelt számítási kapacitásra. Szerverközpontú{5}}tervezés esetén ez az eltérés az erőforrások megszakadásához vezet: tétlen CPU-ciklusok mellett kimerült memória vagy tárolókapacitás, amelyet semmilyen munkaterhelés nem használ.

AOpen Compute Project (OCP)a 2010-es évek közepe óta hajtja a bontott állványterveket, és a hiperskálázók, mint például a Meta és a Microsoft, nagyszabásúan telepítették a lebontott tárolást és hálózatépítést. A megjelenéseCompute Express Link (CXL)ezt az elképzelést kiterjesztette a memóriabontásra is, így az architektúra egyre gyakorlatiasabb a környezetek szélesebb körében.

Miért ütköznek falba a hagyományos szerverközpontú{0}}tervek?

Két erő nyomja az infrastrukturális csapatokat a széttagolás felé: a kihasználtság és a sávszélesség nyomása.

A felhasználási oldalon a rögzített szervercsomagok nagymértékben hulladékot termelnek. Iparági kutatások szerint a hagyományos szerverek DRAM-kapacitásának nagyjából 25%-a marad kihasználatlanul, még akkor is, ha a memória a szerver teljes költségének közel felét teszi ki. Több ezer csomópont között megszorozva ez a megszakadt kapacitás jelentős tőke- és energiaterhelést jelent.

Ami a sávszélességet illeti, a mesterséges intelligencia képzési klaszterei és a nagy{0}}teljesítményű elemzések olyan forgalmi mintákat generálnak, amelyek élesen eltérnek a hagyományos északi-déli web{2}}szolgáltatási terhelésektől. Ezek a munkaterhelések nagy keleti-nyugati forgalmat generálnak - GPU---GPU, gyorsító--memória és csomópontok között A hagyományos,{14}}szerverközpontú topológiákat a rögzített dobozok közötti rövid rézfutásokkal nem ehhez a mintához tervezték. Ahogy a kapcsolati sebesség 400 G-ról 800 G-ra emelkedik, a réz elektromos korlátait egyre nehezebb megtervezni.

Hogyan működik az optikai összekapcsolás egy szétbontott adatközpontban?

Miután a számítási, memória- és gyorsítóerőforrások külön készletekben helyezkednek el, az ezeket a készleteket összekötő szövet lesz a teljesítmény{0}}kritikus réteg. Az optikai összeköttetés ezt a réteget szolgálja az elektromos jelek fénnyé alakításával, és az adatok továbbításávalegyetlen-módvagytöbbmódusú szálés a vevő oldalon elektromossá alakítva vissza.

Az optikai transzport fizikája szerkezeti előnyöket biztosít ehhez a feladathoz. Az üvegszálban lévő fényjelek méterenként sokkal kisebb csillapítást tapasztalnak, mint a réz elektromos jelei, ami azt jelenti, hogy az optikai kapcsolatok hosszabb távolságokon is képesek megőrizni a jelminőséget az energiaigényes jelkondicionálás (időzítők, DSP-k, hangszínszabályzók) nélkül, amelyet a réz nagyobb sebességeknél igényel. 800 Gbps-nál a passzív réz nagyjából 3-5 méterig praktikus. Az aktív elektromos kábelek ezt akár 7 méterre is kiterjesztik. Az optikai kapcsolatok rutinszerűen 100 métertől 2 kilométerig terjednek, azonos adatsebességgel, a koherens optika pedig több tíz kilométert is elérhet.

Egy bontott architektúrában ez az elérési előny nem absztrakt. Közvetlenül meghatározza, hogy az erőforráskészletek milyen távol helyezkedhetnek el egymástól, miközben továbbra is egységes rendszerként viselkednek. Pontosabban:

• Az állványon belül:A réz továbbra is dominál a nagyon rövid kapcsolatokban - szerver-a-top-a rack kapcsolója között, a GPU-és a-GPU egy tálcán belül. 2–3 méter alatti távolságban a réz egyszerűbb, olcsóbb és alacsonyabb{10}}késleltetésű.
• Rack-to-rack (2–100 m):Ez az a hely, ahol az optikai összekapcsolás válik a gyakorlati alapértelmezéssé 400 G és a felett. Egy számítási rack csatlakoztatása egy szomszédos rack memóriakészletéhez, vagy a GPU-tálcák soron keresztül történő összekapcsolása általában megköveteli az optikai szál által biztosított sávszélesség-sűrűséget és elérést.Száloptikai kábel szerelvényekésMPO/MTP kapcsolatszabvány ezekre az utakra.
• Szoba---terem és épület---épület (100 m–10+ km):Ilyen távolságokon és sebességeken csak az optikai transzport életképes. Ez a hatókör fontos az egyetemi-léptékű lebontásban, ahol a tárterületek, a biztonsági mentési számítási vagy a katasztrófa-helyreállítási-erőforrások külön épületekben helyezkednek el.

Optikai összekapcsolás vs réz a szétbontott adatközpontokban

Az optikai és a réz közötti választás nem bináris -, hanem hatókör-függő. A kettőt a következőképpen lehet összehasonlítani a bontott tervben a legfontosabb tényezők között:

A gyakorlati megoldás: használjon rezet, ahol még mindig a rövidtávú{0}}egyszerűség győz. Használja az optikai eszközöket, ahol az elérés, a sávszélesség-sűrűség, az energiahatékonyság vagy a kábelkezelés válik kötelezővé. Szétbontott környezetben a teljes összekapcsolás optikai aránya növekszik, mivel maga az architektúra hosszabb, nagyobb sávszélességű utakat hoz létre a különálló erőforráskészletek között. A médiatípusok mélyebb összehasonlításához ldszáloptikai vs rézkábelek: ami megfelelő az Ön telepítéséhez.

Az optikai összeköttetés fő előnyei a szétbontáshoz

Nagyobb sávszélesség-sűrűség az elkülönített erőforráskészletekhez

A lebontás növeli az összekapcsolási réteget átlépő forgalom mennyiségét, mivel az egykor egyben{0}}elhelyezett erőforrások most a hálózaton keresztül kommunikálnak. Az optikai szálak ezt az igényt támogatják, nagyobb -szál sávszélességgel és több szál kábelenként. Egy szingliszalagszálas kábeltöbb száz szálat képes szállítani egy kompakt keresztmetszetben-, lehetővé téve azt a fajta portsűrűséget, amelyet a szétbontott GPU-fürtök és memóriakészletek igényelnek.

Kisebb teljesítmény és hőterhelés léptékben

Az energiahatékonyság fontosabb a bontott tervezésben, mivel az összekapcsolási réteg a teljes rendszerforgalom nagyobb részét viszi át. A 800 G és afölötti feszültségnél a mérsékelt távolságon lévő rézkapcsolatok energiaigényes -DSP-feldolgozást igényelnek mindkét végén. Az egyenértékű sebességű és távolságú optikai kapcsolatok bitenként kevesebb energiát fogyasztanak. Az NVIDIA műszaki dokumentációja a társ-optikai kapcsolóplatformról beszámol a3,5-szeres energiafogyasztás csökkenésa hagyományos dugaszolható adó-vevőkhöz képest. Adatközponti méretekben ez a különbség közvetlenül alacsonyabb villanyszámlákban és csökkentett hűtési infrastruktúrában jelentkezik.

Moduláris, független skálázás

A szétbontás egyik alapvető ígérete az, hogy a számítások, a memória és a tárolás eltérő ütemben skálázható. Az optikai összekapcsolás támogatja ezt az ígéretet, mivel egy erőforráskészlet kapacitásának növelése nem igényli a teljes szövet újratervezését.Csatlakoztatható optikai modulokbővíthető vagy fokozatosan hozzáadható - 400 G-ról 800 G-ra 1,6 T-ra - anélkül, hogy megváltoztatná a mögöttes rostberendezést.

Rugalmasság heterogén munkaterhelésekhez

Ha az erőforrásokat egy nagy teljesítményű optikai hálón keresztül egyesítik és összekapcsolják, az infrastrukturális csapatok dinamikusan hozzárendelhetik az erőforrásokat a terhelésekhez, ahelyett, hogy a terheléseket a rögzített szerverkonfigurációk köré alakítanák. Ez a rugalmasság különösen értékes olyan környezetekben, ahol a mesterséges intelligencia képzési munkái, a valós idejű következtetések, az analitikai folyamatok és a tároló-nehéz alkalmazások egymás mellett léteznek, és versengenek a különböző erőforrástípusokért.

Hogyan kapcsolódik az optikai összekapcsolás a CXL-hez és a Co{0}}csomagolt optikához?

CXL: a memória- és erőforrás-megosztás protokollrétege

A CXL (Compute Express Link) és az optikai összekapcsolás megoldja a bontási probléma különböző részeit. A CXL egy nyílt szabványú protokoll -, amely a PCIe fizikai rétegére - épül, amely lehetővé teszi a gyorsítótár-koherens kommunikációt a CPU-k, memóriaeszközök és gyorsítók között. Meghatározza, hogyan lehet a szétválasztott erőforrásokat összevonni és hatékonyan megosztani szoftver- és protokollszinten.

A CXL Konzorcium, amelynek tagjai közé tartozik az Intel, az AMD, az NVIDIA, a Samsung, a Microsoft, a Google és a Meta, 2023 novemberében kiadta a CXL 3.1-et, amely kifejezetten támogatjatöbb-szintű váltás és szövet-alapú bontásaz állványon túl. A CXL 3.0 akár 4096 csomópont támogatását is bevezette egy egységes szerkezetben, lehetővé téve a rack-skálát és a potenciálisan fürt{5}}méretű memóriatárolást.

Az optikai összekapcsolás az a fizikai átvitel, amely képes CXL-forgalmat (és más protokollokat) továbbítani az elosztott csomópontok között. A CXL-alapú memóriatárolást értékelő csapat és az optikai összekapcsolást értékelő csapat gyakran ugyanazon a lebontási kezdeményezésen dolgozik különböző szempontokból - az egyik a protokoll- és erőforrás-megosztási logikával, a másik pedig a fizikai átvitellel foglalkozik.

Co-csomagolt optika: az optikai elemeket közelebb tolja a chiphez

A co-packed optics (CPO) tovább megy azáltal, hogy az optikai motorokat közvetlenül ugyanarra a csomaghordozóra integrálja, mint a switch ASIC vagy GPU, ahelyett, hogy külön csatlakoztatható adó-vevőkre támaszkodna, amelyek az előlapon lévő elektromos nyomvonalon keresztül vannak csatlakoztatva. Ez kiküszöböli a rendszer leghosszabb és legtöbb{2}}áramigényes elektromos utakat.

A 2025-ös GTC-n az NVIDIA bejelentette az elsőtco-csomagolt szilícium fotonika kapcsolóplatformok(Quantum-X Photonics és Spectrum-X Photonics), akár 409,6 Tb/s sávszélességet biztosít 512 porttal, 800 Gb/s sebességgel. Az NVIDIA vezérigazgatója, Jensen Huang megjegyezte, hogy a hagyományos csatlakoztatható adó-vevők használatával millió GPU-ra skálázva nagyjából 180 MW-ot fogyasztana az adó-vevő egységből.

A CPO-t ma már nem kell minden bontást értékelő csapatnak bevetnie. A legtöbb esetben a csatlakoztatható optikai modulok maradnak a domináns formaadatközponti száloptikatelepítésekre, és ez továbbra is legalább a 2020-as évek végéig tart. A CPO azonban az optikai ütemterv irányát képviseli, és a nagy mesterségesintelligencia-klasztereket vagy a következő -generációs bontott szöveteket tervező csapatoknak szorosan nyomon kell követniük az érettséget.

Mikor van a legtöbb értelme az optikai összekapcsolásnak?

AI és gyorsító{0}}nehéz környezetek

A mesterséges intelligencia oktatóklaszterei az egyik legerősebb felhasználási esetek az optikai összekapcsoláshoz bontott kontextusban. Ezek a rendszerek hatalmas keleti-nyugati forgalmat generálnak a GPU-ról-a GPU-ra és a GPU-ra-menő -memóriaútvonalakra. Ahogy a fürtök mérete több százról több ezer GPU-ra nő, az elérési és sávszélességi igények gyorsan meghaladják azt, amit a réz képes támogatni. Az NVIDIA GB200 NVL72 architektúrájában például a hálózati költségek (beleértve az optikai adó-vevőket is) a fürt teljes költségének 15–18%-át teszik ki, és az optikai adó-vevők a hálózati költségek nagyjából 60%-át teszik ki. Az optikai réteg optimalizálásának gazdaságossága és teljesítménye jelentős.

Memóriatárolás és komponálható infrastruktúra

Ha csapata a CXL{0}}alapú memóriatárolást értékeli, a fizikai szállítási rétegnek támogatnia kell ezt a szétválasztást anélkül, hogy elfogadhatatlan késleltetést vagy méretkorlátozást adna hozzá. A CXL 3.1 kifejezetten a rack-en túli szövet-skálabontást célozza meg, ami azt jelenti, hogy az összekapcsolási útvonalak nagyobb távolságokat fognak át, mint a hagyományos kiszolgálón belüli-memóriabuszok. Az optikai kapcsolatok természetes módon illeszkednek ezekhez az utakhoz.

Nagyméretű{0}}környezetek egyenetlen skálázási igényekkel

Az optikai összekapcsolás akkor is értelmesebb, ha a számításnak, a memóriának és a tárolásnak eltérő ütemben kell skáláznia. Ha a számítási kapacitása évente háromszorosára, de a tárhely 1,5-szeresére nő, a lebontott architektúra lehetővé teszi az egyes készletek önálló bővítését -, és az optikai összekapcsolás ezt fizikailag is lehetővé teszi anélkül, hogy minden alkalommal újratervezni kellene a kábelezést.

Amikor NINCS értelme

Az optikai összekapcsolás nem minden környezet megfelelő kiindulópontja. Ha adatközpontja elsősorban kiegyensúlyozott, általános célú-munkaterhelést futtat a hagyományos szervereken, és a rack-to-rack forgalma szerény, és jól-kiszolgálja a meglévő réz infrastruktúra, akkor előfordulhat, hogy az optikai-első szövet költsége és bonyolultsága nem indokolt. Hasonlóképpen, ha olyan léptékben működik, hogy néhány tucat kiszolgáló felel meg az igényeinek, maga a bontás több műveletet bonyolíthat, mint amennyit megtakarít. Az architektúra kifizetődő, ha a méretarány, a heterogenitás és az erőforrás-kiegyensúlyozatlanság valós és mérhető -, nem hipotetikus.

Mit kell értékelni a telepítés előtt

1. Térképezze fel a tényleges szűk keresztmetszetet

Kezdje egy világos kérdéssel: mi a kötelező megkötés? Elérhető (a rézpályák túl rövidek az állvány elrendezéséhez)? Sávszélesség-sűrűség (nem elegendő kábelenkénti átviteli sebesség a GPU-fürt táplálásához)? Teljesítmény (az elektromos kapcsolatok túl sok wattot fogyasztanak 400 G+ mellett)? Erőforrás-kihasználtság (a szerverek túlzottan ki vannak szolgáltatva az egyik tengelyen, a másikon kiéheztek)? Az optikai összekapcsolás akkor a legértékesebb, ha a szűk keresztmetszet fizikai és mérhető, nem pedig akkor, ha általános modernizációs gesztusként alkalmazzák.

2. Értékelje a rendszer teljes költségét, ne a kábel költségét

Gyakori hiba, hogy egy rézkábel árát hasonlítják össze egyoptikai kábelelkülönítésben. Ez az összehasonlítás félrevezető. Az értelmes összehasonlítás magában foglalja az energiafogyasztást, a hőterhelést (és az általa generált hűtési költségeket), a rack egységenkénti portsűrűséget, a használható hatótávolságot, a frissítési rugalmasságot és a tágabb architektúrában a megrekedt erőforrások költségét. Számos, 400 G-nál nagyobb bontású környezetben az üvegszál teljes birtoklási költsége alacsonyabb, mint a rézé, ha a teljes rendszert figyelembe vesszük.

3. Ellenőrizze a kompatibilitást és a működési készenlétet

Értékeljeoptikai kábel tesztelésekövetelmények, a modulok interoperabilitása, felügyeleti eszközök és csapata optikai szálas ismerete. A csatlakoztatható optikai modulok (OSFP, QSFP-DD) jól-szabványosítottak és széles körben támogatottak, de az üzemeltetési csapatnak kényelmesnek kell lennie az üvegszálas kezelésben, tisztításban és hibaelhárításban, mielőtt nagyszabású telepítést végezne. Fontolja meg egy kísérleti tartomány létrehozását, ahol ellenőrizheti ezeket a működési tényezőket.

4. Tervezze meg a rostnövény élettartamát

Az üvegszálas infrastruktúra egyik jelentős előnye, hogy a passzív szálas üzem - a kábelek, patch panelek és útvonalak - az adó-vevő technológia több generációját is támogatni tudja. Jól-kidolgozottadatközponti kapcsolatA ma 400G-ra telepített üvegszálas üzem képes 800G és 1,6T frissítéseket támogatni az adó-vevők cseréjével, új kábelek kihúzása nélkül. Ez védhetőbbé teszi az optikai szálba történő kezdeti beruházást 10 éves tervezési horizonton.

Gyakorlati örökbefogadási út

1. lépés: Határozzon meg egy korlátozott tartományt.Keresse meg azt a helyet, ahol a réz elérése, teljesítménye, sávszélesség-sűrűsége vagy az erőforrások elakadása már mérhető fájdalmat okoz. Ez lehet egy GPU-fürtbővítés, egy rack--to{2}}szűk keresztmetszet egy analitikai környezetben, vagy egy memóriatárolási kísérlet.

2. lépés: Pilotálás és érvényesítés.Telepítsen optikai összeköttetést az adott tartományban. Mérje meg a késleltetési viselkedést, az áramfelvételt, a működési összetettséget és a bővítési gazdaságosságot a meglévő alapállapothoz képest.

3. lépés: Bővítse ki a bizonyítékok alapján.Használja a kísérleti adatokat az üzleti és műszaki alapok felépítéséhez a szélesebb körű alkalmazás érdekében. A bontást és az optikai migrációt ritkán lehet egyetlen nagy{1}}projektként kezelni. A fokozatos bevezetés lehetővé teszi a tanulást, a beállítást és a szervezeti bizalom építését.

Döntési ellenőrzőlista: Az optikai összekapcsolás megfelelő-e az Ön lebontási kezdeményezéséhez?

• A rack----állvány vagy a szoba--helyiség-kapcsolati távolsága meghaladja a réz gyakorlati elérhetőségét az Ön célsebessége mellett?
• 400G vagy nagyobb kapcsolati sebességet tervez a közeljövőben?
• Az elektromos összeköttetésből származó energiafogyasztás jelentős részét képezi adatközpontja energiaköltségvetésének?
• CXL{0}}alapú memóriatárolást, komponálható infrastruktúrát vagy GPU-fürtbővítést értékel?
• Mérhető költségproblémát jelent-e az erőforrások elakadása (a tétlen számítás, a memória vagy a tárolóhely zárolva a rögzített szervereken belül)?
• A környezetének különböző ütemben kell méreteznie a számításokat, a memóriát és a tárolást?

Ha ezek közül három vagy több érvényes, az optikai összekapcsolás komoly értékelést érdemel a felosztási ütemterv részeként.

GYIK

Mit jelent az optikai összekapcsolás egy adatközpontban?

Az optikai összekapcsolás egy olyan szállítási technológia, amely fényjeleket használoptikai kábelekadatátvitelhez hálózati eszközök, szerverek, kapcsolók, tárolórendszerek és adatközpontokon belüli és adatközpontok közötti erőforráskészletek között. Nagyobb sávszélességet, nagyobb elérést és kisebb bitenkénti teljesítményt kínál a rézhez képest egyenértékű sebességgel -, így különösen fontos a szétosztott és mesterséges intelligencia-orientált architektúráknál.

Miben különbözik az optikai összeköttetés a CXL-től?

Különböző rétegekben működnek. Az optikai összekapcsolás egy fizikai átviteli technológia - fény segítségével mozgatja a biteket A pontból B pontba. A CXL egy protokollszabvány, amely meghatározza a CPU-k, a memória és a gyorsítók koherens kommunikációját. Az optikai összeköttetés továbbíthatja a CXL-forgalmat, de a CXL elektromos összeköttetéseken is fut a rövid{4}}kapcsolatokhoz. A csapatok gyakran egyidejűleg értékelik mindkettőt, mert a szétbontás jobb protokollok (CXL) és jobb fizikai szállítás (optika) iránti igényt teremt.

Együtt élhet-e a réz és az optikai egy szétbontott adatközpontban?

Igen, és általában meg is teszik. A legtöbb bontott környezet rezet használ nagyon rövid rack-en belüli-csatlakozásokhoz (3–5 méter alatt), ahol egyszerűbb és olcsóbb marad, és optikai szálat használ a rack-to-rack, sor-to-, és hosszabb utak, ahol a réz elérése, teljesítménye és kötési sűrűsége korlátozódik. A döntés hatókör-függő, nem minden-vagy-semmi.

Mi az a -csomagolt optika, és most szükségem van rá?

A Co-packed optics (CPO) az optikai motorokat közvetlenül ugyanabba a csomagba integrálja, mint a switch ASIC vagy processzor, így nincs szükség külön csatlakoztatható adó-vevőkre, és csökkenti az energiafogyasztást és a késleltetést. Az NVIDIA és a Broadcom a CPO-t a következő -generációs AI hálózati platformokon telepíti. A legtöbb adatközpontnak ma nincs szüksége CPO-ra -csatlakoztatható optikai moduloktovábbra is a standard -, de a CPO a 2026–2028-as időkeretben a nagy-léptékű AI-infrastruktúra ütemtervén szerepel.

Mikor NE folytassam az optikai összekapcsolással történő szétbontást?

Ha a munkaterhelése{0}}kiegyensúlyozott a számítás, a memória és a tárhely között; mértéke szerény (néhány tucat szerver); és a meglévő réz infrastruktúra megerőltetés nélkül kezeli jelenlegi és közeli -távú sávszélesség-igényét -, a szétbontás és az optikai migráció bonyolultsága nem biztos, hogy megéri a befektetést. Kezdje a szűk keresztmetszettel, ne a divatszóval.

Milyen típusú szálakat használnak az adatközponti optikai összeköttetésben?

Egymódusú{0}}szálas szálhosszabb-távolságú, nagyobb-sebességű linkekhez használatos (általában rack-to-rack és tovább).Multimódusú szálgyakori a rövidebb, legfeljebb néhány száz méteres belső-adatközpont-kapcsolatoknál. A választás az egyes linkekhez szükséges elérési távolságtól, sebességtől és költségprofiltól függ.