800G Ethernet-opgraderingsvejledning: Optik, fiber og switches

800G Ethernet er en højhastigheds-Ethernet-grænseflade, der flytter 800 gigabit pr. sekund over en enkelt port, bygget af otte elektriske eller optiske baner, der kører med ca. 100 Gb/s hver. Det fordobler båndbredden per-port på 400G Ethernet, hvilket lader et netværk bære den samme kapacitet over færre links mellem switche, GPU'er og lager - eller langt mere kapacitet over det samme antal racks.

Men den del, der betyder noget i virkelige implementeringer, er ikke overskriftsnummeret. 800G ændrer den optik, du køber, de fiber og de stik, du trækker, den strøm og afkøling, hvert rack skal absorbere, og den måde, du validerer links, før de går live. Behandl det som et port-hastighedsbump, og du vil ramme undgåelige problemer; behandle det som en arkitekturbeslutning, og det bliver en af ​​de reneste måder at skalere en AI eller cloud-stof på.

Hvad er 800G Ethernet?

800G Ethernet, også skrevet 800GbE, transmitterer Ethernet-rammer med en samlet hastighed på 800 Gb/s. Intet enkelt fysisk signal bærer hele denne hastighed. I stedet for stripper grænsefladen data på tværs af otte parallelle baner - otte elektriske baner fra switch ASIC til modulet og otte optiske baner (eller bølgelængder) ud til fiberen - og præsenterer dem for resten af ​​netværket som ét logisk link.

Hver bane bruger PAM4-signalering ved omkring 100 Gb/s (106,25 Gb/s på ledningen). Otte af disse baner giver dig 800 Gb/s. Denne 8×100G-struktur er den definerende egenskab for nutidens 800G-generation, og det er grunden til, at en enkelt 800G-port kan træde ind for to 400G-porte eller otte 100G-porte - forudsat at switchen, optikken, kablerne og enheden i den fjerne ende alle er enige om, hvordan den kapacitet er opdelt.

800G Ethernet vs 400G Ethernet: Hvad ændrer sig faktisk

Den åbenlyse forskel er, at 800G har dobbelt så stor båndbredde som 400G. De praktiske forskelle er det, der driver projektplanen:

Den mest oversete række er ASIC-kravet. Et 800G QSFP-DD800-modul er mekanisk kompatibelt med et 400G QSFP-DD-bur, så det passer fysisk til -, men det har brug for en værts-ASIC, der understøtter 100G-per-banesignalering. Slip en i en 50G-per-bane 400G-switch, og den leverer ikke 800G. Kapacitetsplanlægning starter der, ikke ved frontpladen.

Hvorfor 800G Ethernet betyder noget nu

Virksomhedstrafik plejede at flyde mest nord-syd mellem brugere og applikationer. AI-træning, stor-inferens og distribueret lagring har vendt det: den tunge trafik er nu øst-vest, mellem acceleratorer og mellem lagernoder inde i stoffet. Når tusindvis af GPU'er synkroniserer gradienter eller udveksler parametre, bliver netværket - ikke computeren - flaskehalsen.

Adoption afspejler det pres. IfølgeDell'Oro Groups datacenterskifteprognose, 800G havneforsendelser krydsede 20 millioner enheder inden for omkring tre år efter første forsendelse - en milepæl 400G tog seks til syv år at nå - næsten udelukkende trukket af AI back-netværk. Rampen er stejl, netop fordi arbejdsbelastningen er båndbredde-hungrende på en måde, som generel-databehandling aldrig har været.

AI og Machine Learning Fabrics

I et AI back-end-netværk er det virkelige spørgsmål ikke, om 800G er hurtigere, men om det reducerer overabonnement mellem GPU'er uden at skabe en ny termisk eller kabelflaskehals. Kollektive operationer såsom alle-reducer er følsomme over for den langsomste vej, så en struktur, der halverer antallet af links, mens den holder ventetiden og overbelastningen i skak, forbedrer direkte færdiggørelsestiden for opgaven. Det er grunden til, at 800G dukker først op på spine-to-leaf uplinks og GPU-to-leaf links i klynger, der kører RoCEv2, hvor tabsfri adfærd og belastningsbalancering betyder lige så meget som rå gennemløb.

Cloud og Hyperscale

Hyperscale-operatører bruger højere porthastigheder til at øge båndbredden uden at øge rackkompleksiteten i samme hastighed. Ét 800G uplink erstatter to 400G uplinks, hvilket betyder færre kabler, færre optik at administrere og mere frihøjde pr. rackenhed. I stor skala udmønter det sig i færre fejlpunkter og simplere kabelanlæg - driftsbesparelser, der ofte opvejer forskellen pr.-portomkostninger.

Båndbreddetæthed og effekt

Når stoffer skaleres, bliver båndbredde pr. stativ en hård designbegrænsning. At bygge 800 Gb/s ud af mange langsommere porte forbrænder frontpladeplads, multiplicerer kabler og tilføjer driftsoverhead. Konsolidering af det i 800G-porte kan sænke energiforbruget pr. flyttet bit -, men kun nogle gange. Den faktiske effekt pr. bit afhænger af switch-ASIC, den optiske type (et lineært -drev LPO-modul kan trække 4-10 W, hvor et DSP-modul trækker 14-17 W), rækkevidden og køledesignet. Behandl "mere effektiv" som et krav om at verificere mod din egen ASIC og optik, ikke en garanti.

800G Ethernet-standarder: IEEE 802.3df, 800GBASE-R og Lane Architecture

Det er her, mange 800G-oversigter stopper. "800G" er ikke en enkelt specifikation - det er en stak af relaterede standarder, der definerer, hvordan hastigheden kodes, korrigeres og føres over kobber og fiber.

Fra 800GBASE-R til IEEE 802.3df

Den første formelle 800G-specifikation kom fraEthernet Technology Consortium i 2020 som 800GBASE-R. I stedet for at opfinde en ny arkitektur, genbrugte den to sæt af den eksisterende 400G-logik fra IEEE 802.3bs, modificeret til at distribuere data på tværs af otte 106-Gb/s fysiske baner og beholdt standard RS(544.514) fremadrettet fejlkorrektion, så den nye hastighed forblev kompatibel med den eksisterende fysiske tænkning. Den genbrug er grunden til, at 800G ankom så hurtigt: det meste af den hårde logik eksisterede allerede ved 400G.

IEEE ratificerede derefter den formelle standard.IEEE 802.3df-2024blev offentliggjort i marts 2024 som Amendment 9 til IEEE Std 802.3-2022, der tilføjede MAC-parametre, fysiske lag og administrationsparametre for 800 Gb/s (og yderligere 400 Gb/s fysiske lag) baseret på 100 Gb/s-pr. multimode signal over kobber,{8} enkelt-mode fiber. Det elektriske interface mellem ASIC'en og modulet følger IEEE 802.3ck for 100G-per-banesignalering. Arbejdet med næste trin - 200 Gb/s pr. bane, der muliggør fire-bane 800G og otte-bane 1.6T - skrider frem i IEEE 802.3dj.

Hvad lagene faktisk gør

Et højhastigheds-Ethernet-link er mere end et kabel. Fire lag gør det rigtige arbejde, og at forstå dem er det, der lader dig læse et transceiver-dataark korrekt:

• MAChåndterer Ethernet frame formatering og adgang til mediet.
• PCS(Physical Coding Sublayer) koder dataene og striber dem på tværs af de otte baner. I 800GBASE-R er to 400G PCS-instanser tilpasset til at forsyne én 800G MAC.
• FEC(Forward Error Correction) registrerer og reparerer bitfejl. Ved PAM4-hastigheder er den rå fejlrate høj nok til, at FEC ikke er valgfri - det er det, der gør linket brugbart, og FEC-typen påvirker latens.
• PAM4sender to bits pr. symbol ved hjælp af fire amplitudeniveauer i stedet for de to niveauer af ældre NRZ-signalering, hvilket fordobler datahastigheden pr. bane ved samme baudrate - på bekostning af meget strammere signal-til-støjmargener.

PMD-typerne, der definerer 800G

Det fysiske medium afhængige (PMD) underlag er hvor "800G" bliver til et specifikt modul, du kan bestille. IEEE 802.3df-2024 definerer en familie på otte-bane, 100G-per-bane PMD'er:

• 800GBASE-CR8- otte baner over kobber (direkte vedhæftning).
• 800GBASE-KR8- otte baner over et bagplan.
• 800GBASE-VR8 / 800GBASE-SR8- otte baner over multimode fiber, meget kort og kort rækkevidde.
• 800GBASE-DR8 og 800GBASE-DR8-2- otte parallelle single-baner i ca. 500 m og 2 km.

Et almindeligt forvirringspunkt er værd at rette: de populære 800G "FR4" og "LR4" moduler erikke802.3df otte-bane PMD'er. I praksis leveres de som2×FR4og2×LR4- to uafhængige 400G-FR4/LR4 optiske motorer, der bruger CWDM4-bølgelængder over duplex single-mode fiber - eller, i den nyeste generation, som ægte fire-sporet optik bygget på 200 Gb/s-per lane{10}IE. Når en leverandør angiver "800G FR4", skal du bekræfte, om det er en 2×400G-gruppe eller en 200G-per-banedel, fordi de to interagerer med forskellige ting.

800G-optik og formfaktorer: OSFP vs QSFP-DD800

To pluggbare formfaktorer dominerer 800G: OSFP og QSFP-DD800. Begge har otte baner ved 100G PAM4. Forskellen er i termik, tæthed og bagudkompatibilitet -, og det rigtige svar afhænger af, hvad du bygger.

OSFP

OSFP (Octal Small Form-factor Pluggable) blev designet fra starten til otte baner med høj-hastighed og høj effekttab. PrOSFP MSA, formfaktoren understøtter 400G (8×50G), 800G (8×100G) og 1.6T (8×200G), passer til op til 36 porte i en 1U frontplade, og standardvarianten leveres med en integreret heatsink til termisk frihøjde. Den frihøjde er grunden til, at OSFP er standard i nye NVIDIA-klasse AI-klynger, hvor moduler kan køre 12-17 W og derover.

En implementeringsdetalje, der slår teamene sammen: OSFP kommer i en integreret-køleplade (IHS) smag og en ride-køleplade (RHS) smag. NIC og nogle serverporte kræver RHS; Bestil IHS-moduler til disse slots, og de vil fysisk ikke have plads. Bekræft kølepladetypen mod værten før køb.

QSFP-DD800

QSFP-DD800 udvider den gennemprøvede QSFP-DD-familie til 800G, mens den bevarer det samme kompakte fodaftryk. Dens overskriftsfordel er bagudkompatibilitet: somQSFP-DD800 MSAbeskriver, accepterer en QSFP-DD800-port også QSFP+-, QSFP28-, QSFP56- og 400G QSFP-DD-moduler, som lader operatører genbruge moduler, som industrien allerede har brugt ca. 9 milliarder USD på. Hvis du opgraderer en installeret QSFP ejendom i stedet for at bygge greenfield, er denne kontinuitet værdifuld. QSFP-DD800 bygger direkte på det bredereQSFP-DD formfaktor, så burene, panelerne og det operationelle værktøj fortsætter. DSP-baserede QSFP-DD800-moduler trækker typisk 14-17 W med LPO-varianter i 4-10 W-området.

800G OSFP vs QSFP-DD800: Hvilken skal du vælge?

Den ærlige opdeling er: byg til termik og 1.6T køreplanen, eller byg til tæthed og genbrug.

• Vælg OSFPtil nye AI-træningsstoffer, hvor hver port kører varmt, har termisk margin betydning, og du vil have en ren vej til 1,6T (OSFP-XD / OSFP1600).
• Vælg QSFP-DD800når du udvider et eksisterende QSFP-DD-omskifteranlæg, har brug for frontpanel-tæthed og ønsker at beskytte tidligere investeringer i optik og kabler.

Vælg ikke på popularitet. Beslutningen er drevet af den switch-platform, du har valgt, den optik, der faktisk er tilgængelig for den, de linkafstande, du skal tilbagelægge, din fibertype og dit køledesign.

800G optiktyper efter rækkevidde og fiber

Når først formfaktoren er indstillet, vælges optikken efter afstand og fiber, ikke efter porthastighed. Dette er den mest nyttige valgtabel til et 800G-projekt - det er forskellen mellem at bestille et modul, der lyser op, og et, der ikke kan nå den fjerne ende. Nedenstående rækkevidde er typiske industriværdier; bekræft altid mod det specifikke datablad.

Et par praktiske regler falder lige ud af denne tabel. SR8 og VR8 er de eneste multimode muligheder, ogOM3/OM4/OM5-kvalitet du har installeretcaps, hvor langt de når. Hver enkelt-tilstandsoptik ovenfor kører over OS2, og den nøjagtigeenkelt-fibertypepåvirker tab og afstand. Under de optiske muligheder dækker kobber og aktive kabler de meget korte rækker: passiv DAC til løb op til et par meter, aktivt elektrisk kabel (AEC) til en rækkevidde på cirka 3-7 m inde i og mellem tilstødende stativer og AOC, hvor en fast modul-plus-fibersamling er praktisk.

800G Breakout: 2×400G, 4×200G og 8×100G

En af de mest nyttige egenskaber ved 800G-platforme er breakout. Fordi havnen har otte baner, kan den opdeles. Afhængigt af switchen, optikken og kabelsamlingen kan en 800G-port køre som 1×800G, 2×400G, 4×200G eller 8×100G.

Dette betyder noget, fordi næsten intet netværk flytter til 800G overalt på én gang. En realistisk udrulning sætter 800G i ryggen eller AI'en tilbage-, mens blad-, lager- og serverporte forbliver på 100G, 200G eller 400G. En 800G DR8-port, for eksempel, bryder normalt ud til 2×400G-DR4 eller 8×100G for at forsyne disse enheder med lavere-hastighed, mens et 2×FR4-modul forbinder to eksisterende 400G-FR4-endepunkter uden noget breakout-kabel overhovedet.

Breakout er også der, hvor antagelserne går galt. Konnektoren, fiberpolariteten, banekortlægningen, switch-NOS-versionen, optiktypen og de understøttede hastigheder skal alle være på linje -, og ikke hver 800G-port understøtter alle breakout-tilstande i hver softwareudgivelse. Planlæg den fysiske side tidligt: ​​at vælge denhøjre MPO breakout kabelfor den opdeling, du har til hensigt, er lige så vigtig som selve modulet, og den bredereMTP versus MPO konnektor beslutningpåvirker tæthed og brugbarhed på tværs af hele stoffet.

Hvor 800G Ethernet bruges -, og hvad hver enkelt sag kræver

Brugstilfældene overlapper hinanden, men kravene bag dem er forskellige. At matche optikken og topologien til arbejdsbyrden er det, der adskiller et fungerende 800G-stof fra et dyrt.

• AI-trænings- og inferensstoffer.Prioriteten er lav, forudsigelig latenstid under tung synkronisering, tabsfri transport (RoCEv2) og ren belastningsbalancering (ECMP) på tværs af stoffet. Rækkevidden er normalt kort, så SR8 inde i stativet og DR8 på tværs af rygsøjlen-blad dominerer; termik skubber disse mod OSFP.
• Cloud og hyperskala.Prioriteten er skalerbar, gentagelig stofkapacitet. 800G konsoliderer rygsøjlens-blad-uplinks og inter-båndbredde; bagudkompatibilitet og enkel betjening styrer disse ofte mod QSFP-DD800.
• Højtydende-databehandling.Prioriteten er forudsigelig databevægelse mellem beregnings- og lagernoder, hvilket betyder, at overbelastningskontrol og skift med lav-latens betyder mere end spidsbelastning.
• Opbevaring og analyser.Prioriteten er vedvarende gennemstrømning for store datasætbevægelser og kontrolpunkter; begrænsningen er normalt hvor hurtig opbevaring og stoffet kan forblive fodret, ikke porthastigheden.
• Sammenkobling af datacenter.Prioriteten skifter til rækkevidde, fibertilgængelighed og strømbudget. Her er 2×FR4 (2 km), 2×LR4 (10 km) og sammenhængende ZR/ZR+ (80 km+) de relevante valg, ofte overført over høje{10}}fibre{11}}MPO/MTP trunk kabelføringi rygsøjlen.

Hvornår skal du opgradere fra 400G til 800G?

800G får sin plads, når der er en målbar flaskehals -, ikke når den blot er tilgængelig. Se efter konkrete signaler, før du forpligter dig:

• 400G uplinks kører konsekvent over ca. 50-70% udnyttelse, vurderet på 95. percentilen snarere end peaks.
• Stofoverabonnement kan du ikke løse ved at ombalancere trafikken eller tilføje et par links.
• En GPU-klynge skalerer til et punkt, hvor båndbreddebehovet pr.-accelerator overstiger, hvad 400G giver uden kraftig overabonnement.
• Antal rygporte eller fiberbaner, der nærmer sig udmattelse.
• En ny konstruktion omkring 51.2T-klasseswitching, hvor 800G simpelthen er den oprindelige porthastighed.

400G er stadig det rigtige svar, når links er underudnyttet, applikationer ikke er netværks-bundet, nuværende switche mangler 100G-PAM4-kompatible ASIC'er (så 800G ville tvinge en gaffeltruckopgradering), eller strøm og køling er ikke klar til 12-17 W pr. port ved høj tæthed.

Eksempel på migrationsscenarie.Et team kører et 400G ryg-stof, der har været behageligt i to år. En ny GPU-klynge kommer online, trafik fra øst-vest stiger, og 95.-percentiludnyttelse på rygsøjlens uplinks ligger omkring 80 %. I stedet for at om-kabler flere 400G-links, introducerer de kun 800G på rygsøjlen: 800G DR8 over enkelt-tilstand for 500 m rygsøjle-til-afløb, med hver 800G-port brudt ud til 2×400G, hvor den lander på eksisterende switches 4.0G. Serveradgang forbliver på 200G. Gevinsterne er reelle - linktælling på rygraden omtrent halvdelen og frihøjden returnerer -, men projektet viser tre ting, der skal håndteres først: den nye switch har brug for 100G-PAM4 SerDes, hver port tilføjer ~15 W varme, stativerne skal absorbere, og DR8-linkene kræver en hvilken som helst multimode til en tidligere fiber, så der er tilbage fra en multimode til tidligere{{31} udskiftes, ikke genbruges.

Sådan planlægger du en 800G Ethernet-opgradering

En 800G-opgradering er et netværksarkitekturprojekt, ikke en hardwareopdatering. Disse trin flyttes i rækkefølge fra "hvorfor" til "validere".

Trin 1: Definer trafikproblemet

Start med flaskehalsen, ikke havnen. Er 400G uplinks overbelastet på et vedvarende grundlag? Vokser øst-vesttrafikken ud af stoffet? Er AI- eller storage-arbejdsbelastninger sprængfyldte? Er stoffet overtegnet, eller løber du tør for porte eller fiber? Hvis du ikke kan pege på et specifikt kapacitets- eller overbelastningsproblem med data bagved, er 800G for tidligt.

Trin 2: Kortlæg topologien

Bestem, hvor 800G går først. De sædvanlige indgangspunkter er spine-to-leaf uplinks, AI back-end fabrics, aggregering med høj-kapacitet, DCI-links og lageraggregering. De fleste hold introducerer 800G i rygsøjlen eller AI-stoffet, mens de holder serveradgang på 100G, 200G eller 400G, med breakout, der bygger bro mellem de to.

Trin 3: Tjek Switch- og ASIC-kapaciteter

To switche med 800G-porte er ikke ens. Bekræft antallet af 800G-porte, understøttede formfaktorer, switching-kapacitet, latency og bufferadfærd, breakout-understøttelse, RoCEv2/tabsfri funktioner, telemetri- og automatiseringshooks, NOS-modenhed og leverandørens interoperabilitetstest. For AI og HPC er overbelastningsadfærd under belastning lige så afgørende som rå gennemløb.

Trin 4: Vælg den rigtige optik

Brug rækkevidde-og-fibertabellen ovenfor. Match optikken til afstand, fibertype, stik, strømbudget, temperaturområde, breakout-behov og verificeret switchkompatibilitet - og kontroller derefter leveringstiden, som har været en reel begrænsning for 800G-optik og DSP'er. Bekræft altid transceiver-databladet mod switch-kompatibilitetsmatrixen, før du bestiller.

Trin 5: Valider fiber og kabler

800G afslører svagheder et langsommere link tolereres. Før opgradering skal du kontrollere fibertype og -kvalitet, konnektorens tilstand og renhed, polaritet, patch-panelkapacitet, bøjningsradius og luftstrømspåvirkningen af ​​tættere kabler. Frem for alt skal du bekræfte, at linket forbliver inden for detsindsættelses-tabsbudget- ved PAM4, et marginalt stik eller en snavset endeflade, der passerede ved lavere hastigheder, kan skubbe et link til fejl. En hurtig port er værdiløs, hvis det fysiske lag ikke er rent og stabilt.

Trin 6: Planlæg strøm og køling

800G optik og kontakter presser hårdere på strøm og termik. En tæt 800G-switch kan trække i størrelsesordenen 700-1.000 W, og hver port tilføjer ca. 12-17 W varme. Gennemgå rackets strømkapacitet, luftstrøm fra for-til{10}}bagside, overvågning af modulets temperatur, ventilatoradfærd, kabelblokering, design af varm/kold gang, og om der er behov for væskekøling eller avanceret køling. Ignorering af dette fører til drosling, link-ustabilitet eller forkortet hardwarelevetid.

Trin 7: Test før skalering

Valider i en kontrolleret pilot før udrulning: linkfremføring-, FEC-adfærd, latens, pakketab, håndtering af overbelastning, breakout-adfærd, telemetrisynlighed, optiktemperatur, interoperabilitet med flere-leverandører og failover. En pilot viser problemer, der er langt sværere at løse, når først stoffet er i produktion.

Almindelige 800G-fejl, der skal undgås

• Behandler 800G som en drop-in.-Det kan kræve ny optik, fiber, køling, switch-konfiguration og overvågning - og en switch ASIC, der understøtter 100G pr. bane.
• Ignorerer breakout-detaljer.Bekræft switch-software, optik, kabler,-fjernende enheder og banekortlægning, før du bestiller. En 800G-port, der "understøtter breakout", understøtter muligvis ikke den nøjagtige tilstand, du har brug for på den nøjagtige NOS, du kører.
• Valg af optik alene ved rækkevidde.Strøm, termik, konnektortype, interoperabilitet og tilgængelighed betyder alt - og blanding af fibertyper er en klassisk fiasko, eftersom DR8/FR4/LR4 har brug for enkelt-tilstand og ikke fungerer over multimode-anlæg.
• Med udsigt over trængselskontrol.For AI og HPC garanterer båndbredde alene ikke ydeevne; tabsfri transport, håndtering af trængsel og lastbalancering afgør det.
• Glemte operationer.Høj-links har brug for stærk telemetri - optisk effekt, modultemperatur, FEC-fejl, pakkefald, kødybde og linkstabilitet skal alle have øjne på dem.

Nøgle takeaways

800G Ethernet er blevet den grundlæggende infrastruktur for AI-æraens datacentre, defineret af otte-bane, 100G-per-banearkitektur i IEEE 802.3df-2024 og 800GBASE-R. Den leverer højere båndbredde pr. port og en praktisk skaleringssti til AI, cloud, HPC og tætte stoffer - og en klar bane mod 1,6T.

Men en vellykket 800G-opgradering afhænger af mere end hurtigere switches. Det betyder, at man matcher formfaktoren (OSFP eller QSFP-DD800) til arbejdsbelastningen, vælger optik efter rækkevidde og fiber, bekræfter, at switch-ASIC understøtter 100G pr. bane, validering af fiberanlægget mod strammere tabsbudgetter og planlægning for 12-17 W varme pr. port. Hvis dit netværk nærmer sig 400G-grænser, eller du bygger til AI og høje-arbejdsbelastninger, skal du starte med trafikanalyse, validere det fysiske lag, pilotere en begrænset implementering og derefter skalere på en klar migreringskøreplan.