Znalost

Dezagregace datového centra odděluje výpočetní techniku, paměť, úložiště a sítě do nezávislých sdružených zdrojů místo toho, aby je zamykala uvnitř pevných hranic serveru. Toto oddělení vytváří novou architektonickou závislost: propojovací vrstva mezi těmito fondy musí poskytovat dostatečnou šířku pásma, dostatečně nízkou latenci a dostatečný dosah, aby se celý systém choval jako jedna koordinovaná struktura. Optické propojení je technologie přenosu, která stále více plní tuto roli - zejména tam, kde měděné spoje narážejí na fyzické limity vzdálenosti, výkonu a integrity signálu.

Tento článek vysvětluje, jak optické propojení podporuje rozčleněné architektury, kde překonává měď, jak souvisí s CXL a ko-zabalenou optikou a kdy má praktický smysl jej převzít.

Co je dezagregace datových center?

V tradičním serveru-centrickém modelu jsou CPU, paměť, úložiště a síť spojeny v jediném šasi. Koupíte si server a získáte pevný poměr všech čtyř - bez ohledu na to, zda vaše zátěž tento poměr potřebuje, nebo ne. Dezagregace datového centra rozbije tento svazek. Každý typ prostředku je organizován do vlastního fondu a pracovní zátěže čerpají z každého fondu přes sdílenou strukturu pouze to, co potřebují.

To je důležité, protože moderní pracovní zátěž je zřídkakdy vyvážená. Rozsáhlá úloha školení jazykového modelu může nasytit paměť GPU a východní-západní šířku pásma, přičemž se sotva dotkne místního úložiště. Analytický kanál-v reálném čase může vyžadovat obrovskou kapacitu paměti, ale pouze střední výpočetní výkon. V návrhu zaměřeném na server- tento nesoulad vede k uváznutí zdrojů: nečinné cykly CPU sedící vedle vyčerpané paměti nebo úložné kapacity, kterou nevyužívá žádná pracovní zátěž.

TheOpen Compute Project (OCP)od poloviny roku 2010 řídí návrhy rozčleněných racků a hyperškálovače jako Meta a Microsoft nasadily rozčleněné úložiště a sítě ve velkém měřítku. VznikCompute Express Link (CXL)rozšířil tuto vizi na disagregaci paměti, díky čemuž je architektura stále praktičtější pro širší škálu prostředí.

Proč tradiční serverové-centrické návrhy narazí na zeď

Dvě síly tlačí infrastrukturní týmy k desagregaci: tlak na využití a tlak na šířku pásma.

Na straně využití vytvářejí pevné serverové balíky odpad ve velkém měřítku. Průmyslový výzkum naznačuje, že zhruba 25 % kapacity DRAM konvenčních serverů je v průměru nevyužito, i když paměť představuje téměř polovinu celkových nákladů na server. Tato uvízlá kapacita, vynásobená tisíci uzly, představuje významnou kapitálovou a energetickou zátěž.

Na straně šířky pásma generují školicí clustery umělé inteligence a vysoce{0}}výkonná analytika vzorce návštěvnosti, které se výrazně liší od tradičních zatížení na sever{1}}jih{2}}. Tyto pracovní zátěže vytvářejí silný přenos z východu-západu - GPU-do-GPU, akcelerátoru-do-paměti a uzlu-k-uzlu - napříč stovkami nebo tisíci koncových bodů. Tradiční serverové{14}}centrické topologie s krátkými měděnými vedeními mezi pevnými boxy nebyly pro tento vzor navrženy. Jak rychlost připojení stoupá ze 400 G na 800 G a dále, elektrická omezení mědi se stávají obtížnějšími.

Jak funguje optické propojení v disagregovaném datovém centru?

Jakmile jsou výpočetní, paměťové a akcelerační prostředky umístěny v samostatných fondech, síť spojující tyto fondy se stane-kritickou vrstvou pro výkon. Optické propojení slouží této vrstvě tím, že převádí elektrické signály na světlo a přenáší datajeden-režimnebovícevidové vláknoa přeměna zpět na elektrickou na přijímacím konci.

Fyzika optického transportu mu dává strukturální výhody pro tuto práci. Světelné signály ve vláknech mají mnohem menší útlum na metr než elektrické signály v mědi, což znamená, že optické spoje mohou udržovat kvalitu signálu na delší vzdálenosti bez úpravy signálu náročného na výkon (retimery, DSP, ekvalizéry), kterou měď vyžaduje při vyšších rychlostech. Při rychlosti 800 Gb/s je pasivní měď praktická až do vzdálenosti zhruba 3–5 metrů. Aktivní elektrické kabely to prodlužují snad na 7 metrů. Optické spoje běžně pokrývají 100 metrů až 2 kilometry při stejném datovém toku a koherentní optika může dosáhnout desítek kilometrů.

V disagregované architektuře není tato výhoda dosahu abstraktní. Přímo určuje, jak daleko od sebe mohou být fondy zdrojů sedět a přitom se chovat jako jednotný systém. konkrétně:

• V rámci stojanu:Měď stále dominuje pro velmi krátká spojení - server-k-hornímu--přepínači racku, GPU-k-GPU v zásobníku. Na vzdálenosti pod 2–3 metry je měď jednodušší, levnější a má nižší{10}}latenci.
• Stojan-do-stojanů (2–100 m):Zde se optické propojení stává praktickým výchozím nastavením při 400G a více. Připojení výpočetního stojanu k paměťovému fondu v sousedním stojanu nebo propojení zásobníků GPU přes řadu obvykle vyžaduje hustotu šířky pásma a dosah, který poskytuje vlákno.Sestavy optických kabelůaKonektivita MPO/MTPjsou standardní pro tyto cesty.
• Místnost-k-místnosti a budově-k-budově (100 m–10+ km):V těchto vzdálenostech a rychlostech je životaschopný pouze optický přenos. Tento rozsah je důležitý pro-desagregaci rozsahu kampusu, kde jsou fondy úložiště, výpočetní zálohy nebo zdroje{2}}obnovy po havárii umístěny v samostatných budovách.

Optické propojení vs měď v disagregovaných datových centrech

Volba mezi optickým a měděným není binární -, závisí na rozsahu-. Zde je ukázka toho, jak se tyto dva porovnávají mezi faktory, které jsou v rozčleněném návrhu nejdůležitější:

Praktické řešení: použijte měď tam, kde-jednoduchost na krátké vzdálenosti stále vítězí. Použijte optické tam, kde se dosah, hustota šířky pásma, energetická účinnost nebo správa kabelů stávají závazným omezením. V rozčleněném prostředí optický podíl na celkovém propojení roste, protože samotná architektura vytváří delší cesty s větší šířkou pásma- mezi oddělenými fondy zdrojů. Pro hlubší srovnání typů médií vizoptické vs. měděné kabely: což je to pravé pro vaše nasazení.

Klíčové výhody optického propojení pro desagregaci

Vyšší hustota šířky pásma pro oddělené fondy zdrojů

Dezagregace zvyšuje objem provozu přes propojovací vrstvu, protože zdroje, které byly kdysi společně{0}}umístěny, nyní komunikují přes strukturu. Optické vlákno podporuje tuto poptávku s vyšší šířkou pásma na -vlákno a více vláken na kabel. Singlpáskový kabelmůže přenášet stovky vláken v kompaktním průřezu-, což umožňuje takovou hustotu portů, jakou vyžadují rozčleněné clustery GPU a paměťové fondy.

Nižší energetická a tepelná zátěž v měřítku

Energetická účinnost je důležitější v disagregovaném návrhu, protože propojovací vrstva nese větší podíl celkového provozu systému. Při 800G a více vyžadují měděné spoje na střední vzdálenosti energeticky-náročné zpracování DSP na obou koncích. Optické spoje při ekvivalentních rychlostech a vzdálenostech spotřebují méně energie na bit. Technická dokumentace společnosti NVIDIA k její-kombinované platformě pro přepínání optiky uvádí a3,5× snížení spotřeby energieve srovnání s tradičními zásuvnými transceivery. V měřítku datového centra se tento rozdíl přímo promítá do nižších účtů za elektřinu a snížení infrastruktury chlazení.

Modulární, nezávislé škálování

Jedním ze základních příslibů dezagregace je, že výpočet, paměť a úložiště se mohou škálovat různými rychlostmi. Optické propojení podporuje tento slib, protože přidání kapacity do jednoho fondu zdrojů nevyžaduje přepracování celé struktury.Zásuvné optické modulylze upgradovat nebo přidávat postupně - ze 400 G na 800 G na 1,6 T - bez změny základního závodu na vlákna.

Flexibilita pro heterogenní pracovní zátěže

Když jsou prostředky sdruženy a propojeny prostřednictvím vysoce{0}}optické struktury, mohou týmy infrastruktury přiřazovat zdroje k pracovní zátěži dynamicky, místo aby pracovní zátěže tvarovaly podle pevných konfigurací serverů. Tato flexibilita je zvláště cenná v prostředích, kde vedle sebe existují úlohy školení AI, -odvozování v reálném čase, analytické kanály a aplikace s velkým objemem úložiště- a soutěží o různé typy zdrojů.

Jak optické propojení souvisí s CXL a Co{0}}balenou optikou

CXL: protokolová vrstva pro sdílení paměti a zdrojů

CXL (Compute Express Link) a optické propojení řeší různé části problému dezagregace. CXL je otevřený standardní protokol - postavený na fyzické vrstvě PCIe -, který umožňuje-koherentní komunikaci mezi procesory, paměťovými zařízeními a akcelerátory v mezipaměti. Definuje, jak lze oddělené zdroje sdružovat a efektivně sdílet na úrovni softwaru a protokolu.

CXL Consortium, jehož členy jsou Intel, AMD, NVIDIA, Samsung, Microsoft, Google a Meta, vydalo CXL 3.1 v listopadu 2023 s výslovnou podporou províce{0}}přepínání na různých úrovních a strukturovaná{1}}disagregacemimo regál. CXL 3.0 zavedlo podporu až pro 4 096 uzlů v jednotné látce, což umožňuje rackové -škálování a potenciálně cluster{5}}škálování paměti.

Optické propojení je fyzický přenos, který může přenášet provoz CXL (a další protokoly) mezi těmito distribuovanými uzly. Tým vyhodnocující sdružování paměti založené na CXL-a tým vyhodnocující optické propojení často pracují na stejné dezagregační iniciativě z různých úhlů -, jeden se zabývá logikou sdílení protokolu a prostředků- a druhý fyzickým přenosem.

Spolu{0}}zabalená optika: přisunutí optiky blíže k čipu

Co{0}}zabalená optika (CPO) jde ještě dále tím, že integruje optické motory přímo do stejného substrátu pouzdra jako přepínač ASIC nebo GPU, místo aby se spoléhala na samostatné zásuvné transceivery připojené prostřednictvím elektrických tras na předním panelu. Tím se eliminují nejdelší a energeticky nejnáročnější-elektrické cesty v systému.

Na GTC 2025 oznámila NVIDIA svůj prvníspolu{0}}zabalené platformy pro přepínání křemíkové fotoniky(Quantum{0}}X Photonics and Spectrum{1}}X Photonics), poskytující šířku pásma až 409,6 Tb/s s 512 porty při rychlosti 800 Gb/s. Generální ředitel společnosti NVIDIA Jensen Huang poznamenal, že škálování na milion GPU pomocí konvenčních zásuvných transceiverů by spotřebovalo zhruba 180 MW samotného výkonu transceiveru -, což je neudržitelné číslo, na které je CPO navrženo.

CPO není něco, co dnes musí nasadit každý tým vyhodnocující dezagregaci. Zásuvné optické moduly zůstávají pro většinu dominantním tvarovým faktoremoptická vlákna v datovém centrunasazení a bude pokračovat minimálně do konce roku 2020. CPO však představuje směr optického plánu a týmy plánující velké clustery umělé inteligence nebo další{2}}generace disagregovaných struktur by měly pečlivě sledovat jeho vyspělost.

Kdy má optické propojení největší smysl?

AI a akcelerátory-náročná prostředí

Tréninkové klastry umělé inteligence patří mezi nejsilnější případy použití optického propojení v rozčleněném kontextu. Tyto systémy generují masivní přenos z východu{1}}západu přes GPU-do-GPU a GPU-do-paměťových cest. Jak velikosti clusterů rostou ze stovek na tisíce GPU, požadavky na dosah a šířku pásma rychle převyšují to, co může podporovat měď. Například v architektuře NVIDIA GB200 NVL72 představují síťové náklady (včetně optických transceiverů) 15–18 % celkových nákladů na cluster a optické transceivery představují zhruba 60 % těchto síťových nákladů. Ekonomický a výkonný případ pro optimalizaci optické vrstvy je podstatný.

Sdružování paměti a skládací infrastruktura

Pokud váš tým vyhodnocuje sdružování paměti založené na CXL{0}}, fyzická transportní vrstva musí toto oddělení podporovat, aniž by přidávala nepřijatelnou latenci nebo omezovala rozsah. CXL 3.1 se explicitně zaměřuje na desagregaci látkové-škály mimo stojan, což znamená, že propojovací cesty budou pokrývat delší vzdálenosti než tradiční intra{4}}serverové paměťové sběrnice. Optické spoje jsou přirozeně vhodné pro tyto cesty.

Velká-prostředí s nerovnoměrnými potřebami škálování

Optické propojení také dává větší smysl, když je potřeba výpočet, paměť a úložiště škálovat různými rychlostmi. Pokud vaše výpočetní kapacita roste 3× za rok, ale úložiště roste 1,5×, rozčleněná architektura vám umožní rozšiřovat každý fond nezávisle - a optické propojení to fyzicky umožňuje, aniž byste museli pokaždé znovu navrhovat kabeláž.

Když to NEMÁ smysl

Optické propojení není tím správným výchozím bodem pro každé prostředí. Pokud vaše datové centrum provozuje primárně vyvážené, všeobecné{1}}pracovní zatížení na konvenčních serverech a provoz vašeho racku-do{3}}racku je skromný a dobře{4}}obsluhuje stávající měděná infrastruktura, náklady a složitost optické-první sítě nemusí být opodstatněné. Podobně, pokud pracujete v měřítku, kde vašim potřebám vyhovuje několik desítek serverů, může samotná dezagregace přinést větší provozní složitost, než ušetřit. Architektura se vyplatí, když jsou rozsah, heterogenita a nerovnováha zdrojů skutečné a měřitelné - nikoli hypotetické.

Co zhodnotit před nasazením

1. Zmapujte své skutečné úzké hrdlo

Začněte jasnou otázkou: jaké je závazné omezení? Je dosah (měděné dráhy příliš krátké pro vaše uspořádání racku)? Hustota šířky pásma (nedostatečná propustnost na kabel pro napájení clusteru GPU)? Napájení (elektrické spoje spotřebovávající příliš mnoho wattů při 400G+)? Využití zdrojů (servery přetížené na jedné ose a vyhladovělé na jiné)? Optické propojení je nejcennější, když je úzké hrdlo fyzické a měřitelné, nikoli když je přijato jako obecné gesto modernizace.

2. Vyhodnoťte celkové náklady na systém, nikoli náklady na kabel

Častou chybou je porovnávání ceny měděného kabelu s cenou anoptický kabelv izolaci. To srovnání je zavádějící. Smysluplné srovnání zahrnuje spotřebu energie, tepelnou režii (a náklady na chlazení, které vytváří), hustotu portů na jednotku racku, využitelný dosah, flexibilitu upgradu a náklady na uvízlé zdroje v širší architektuře. V mnoha dezagregovaných prostředích při 400G a více jsou celkové náklady na vlastnictví optických vláken nižší než u mědi, když vezmete v úvahu celý systém.

3. Zkontrolujte kompatibilitu a provozní připravenost

Vyhodnoťtetestování optických kabelůpožadavky, interoperabilitu modulů, monitorovací nástroje a operační znalost vašeho týmu s optickými vlákny. Zásuvné optické moduly (OSFP, QSFP-DD) jsou dobře-standardizované a široce podporované, ale váš operační tým by měl být obeznámen s manipulací s vlákny, čištěním a odstraňováním problémů před nasazením ve velkém. Zvažte zahájení pilotní domény, kde můžete tyto provozní faktory ověřit.

4. Naplánujte si dlouhověkost vláknité rostliny

Jednou z významných výhod optické infrastruktury je to, že pasivní vláknová elektrárna - kabely, propojovací panely a cesty - může podporovat více generací technologie transceiverů. Dobře-navrženýkonektivita datového centraDnes instalovaná vláknová továrna pro 400G může podporovat upgrady 800G a 1,6T výměnou transceiverů bez nutnosti tahání nových kabelů. Díky tomu je počáteční investice do vlákna obhajitelnější v horizontu 10 let plánování.

Praktická cesta adopce

Krok 1: Identifikujte jednu omezenou doménu.Hledejte místo, kde dosah mědi, výkon, hustota šířky pásma nebo uvíznutí zdrojů již vytváří měřitelnou bolest. Může to být rozšíření GPU clusteru, rack-k-řešení úzkého hrdla v analytickém prostředí nebo pilotní projekt sdružování paměti.

Krok 2: Pilotujte a ověřte.Nasaďte optické propojení v této doméně. Změřte chování latence, spotřebu energie, provozní složitost a ekonomiku expanze oproti stávající základní linii.

Krok 3: Rozšiřte na základě důkazů.Použijte pilotní data k vytvoření obchodního a technického případu pro širší přijetí. Dezagregace a optická migrace se zřídkakdy nejlépe řeší jako jeden projekt velkého{1}}třesku. Postupné zavádění vám umožní učit se, upravovat a budovat organizační jistotu.

Kontrolní seznam pro rozhodnutí: Je optické propojení pro vaši iniciativu za dezagregaci správné?

• Překračuje vzdálenost mezi vaším rackem-do-rackem nebo místností-k-místnosti při vaší cílové rychlosti praktický dosah mědi?
• Plánujete v blízké době nasazení 400G nebo vyšší rychlosti připojení?
• Stává se spotřeba energie z elektrického propojení smysluplnou částí energetického rozpočtu vašeho datového centra?
• Vyhodnocujete sdružování paměti-založené na CXL, skládací infrastrukturu nebo rozšíření clusteru GPU?
• Je spletení zdrojů (nečinný výpočet, paměť nebo úložiště uzamčené uvnitř pevných serverů) problémem s měřitelnými náklady?
• Potřebuje vaše prostředí škálovat výpočetní výkon, paměť a úložiště různými rychlostmi?

Pokud platí tři nebo více z nich, optické propojení si zaslouží seriózní hodnocení jako součást vašeho plánu na rozdělení.

FAQ

Co je optické propojení v datovém centru?

Optické propojení je technologie přenosu, která využívá světelné signálykabely z optických vlákenpro přenos dat mezi síťovými zařízeními, servery, přepínači, úložnými systémy a fondy zdrojů v rámci datových center a mezi nimi. Nabízí vyšší šířku pásma, delší dosah a nižší výkon na bit ve srovnání s mědí při ekvivalentních rychlostech -, což je zvláště důležité pro rozčleněné architektury a architektury orientované na AI-.

Jak se liší optické propojení od CXL?

Pracují v různých vrstvách. Optické propojení je technologie fyzického přenosu - přesouvá bity z bodu A do bodu B pomocí světla. CXL je protokolový standard, který definuje, jak CPU, paměť a akcelerátory koherentně komunikují. Optické propojení může přenášet provoz CXL, ale CXL také běží přes elektrické spoje pro připojení s krátkým-dosahem. Týmy často vyhodnocují obojí současně, protože dezagregace vytváří poptávku po lepších protokolech (CXL) a lepším fyzickém přenosu (optika).

Mohou měď a optika koexistovat v rozčleněném datovém centru?

Ano a obvykle to dělají. Většina rozčleněných prostředí používá měď pro velmi krátká intra-rozvaděče (do 3–5 metrů), kde je to jednodušší a levnější, a optické vlákno pro--rack,{6}}řadu-řadu a delší trasy, kde se omezení dosahu, výkonu a hustoty mědi stávají závaznými. Rozhodnutí závisí na rozsahu-, ne na všem{10}}nebo{11}}nic.

Co je to spolu{0}}zabalená optika a potřebuji ji nyní?

Co{0}}packaged optics (CPO) integruje optické motory přímo do stejného balíčku jako přepínač ASIC nebo procesor, čímž eliminuje potřebu samostatných zásuvných transceiverů a snižuje spotřebu energie a latenci. NVIDIA a Broadcom nasazují CPO na síťových platformách AI příští{2}}generace. Většina datových center dnes CPO nepotřebuje -zásuvné optické modulyzůstávají standardem -, ale CPO je na plánu pro rozsáhlou-infrastrukturu AI v časovém rámci 2026–2028.

Kdy NEMÁM provádět dezagregaci pomocí optického propojení?

Pokud jsou vaše pracovní zátěže dobře-vyvážené mezi výpočetní technikou, pamětí a úložištěm; váš rozsah je skromný (několik desítek serverů); a vaše stávající měděná infrastruktura bez námahy zvládá vaše současné a krátkodobé-potřeby šířky pásma - přidaná složitost dezagregace a optické migrace nemusí stát za investici. Začněte úzkým hrdlem, ne módním slovem.

Jaké typy vláken se používají v optickém propojení datových center?

Jedno{0}}režimové vláknose používá pro delší{0}}vzdálenost, vyšší{1}}rychlostní propojení (obvykle rack-do-racků a mimo něj).Vícevidové vláknoje běžné pro kratší spojení v rámci-datových{1}}centrů do vzdálenosti několika set metrů. Výběr závisí na požadovaném dosahu, rychlosti a nákladovém profilu každého odkazu.