Kunstig intelligens omformer design af datacenter. Det meste af opmærksomheden går til GPU'er, acceleratorer og køling, men det lag, der stille og roligt afgør, om resten af konstruktionen lykkes, er kablingen. I en AI-klynge afgør det fysiske lag, om du rent faktisk kan nå 400G og 800G, om højhastighedsforbindelser forbliver rene nok til at passere trafik, om luftstrømmen overlever et fuldt befolket rack, og om dit næste hastighedsspring er et kortskift eller en gaffeltruckopgradering.
Denne vejledning er skrevet til infrastruktur- og optiske-netværksteams. Den forklarer, hvad der gør AI-kabling anderledes, de krav, der betyder noget med reelle tal, hvordan man sammenligner DAC, AOC og struktureret fiber, en trin-}}for-planlægningsworkflow, hvad man skal forberede før en 400G- eller 800G-migrering og en tjekliste, du rent faktisk kan bruge. De tekniske referencer her er baseret på gældende IEEE 802.3 og ANSI/TIA-942 standarder.
Hvorfor AI-arbejdsbelastninger ændrer krav til datacenterkabling
Traditionelle virksomhedsdatacentre blev bygget op omkring temmelig forudsigelig applikationstrafik, meget af den nord-syd, og bevægede sig mellem brugere, applikationer og eksterne netværk. AI-klynger inverterer det mønster. Under træning og stor-inferens er det dominerende flow øst-vest: GPU'er udveksler konstant gradienter og aktiveringer med hinanden gennem kollektive operationer som f.eks. alle-reducerer, normalt over et RDMA-stof (Remote Direct Memory Access).
Dette er synligt i leverandørreferencedesigns. NVIDIA bygger GPU-beregningsnetværket som et RDMA-baseret blad-ryggestof ved hjælp af enskinne-optimeret topologi, så enhver GPU højst er et hop fra enhver anden, hvilket er det, der holder multi-GPU-kommunikation effektiv i skala. Konsekvensen af kabelføringen er rent portantal: en enkelt otte-GPU-node kan præsentere otte 400G (eller 800G) øst-vestporte, og en træningspod med flere blade switche pr. rack multiplicerer trunkfibre og patching meget hurtigt.
Når det fysiske lag er under-planlagt, dukker problemerne ikke op på dag ét. De vises senere som overbelastede veje, der kvæler luftstrømmen, som fejlisolering, der tager timer i stedet for minutter, og som omarbejdelse under den første opgraderingscyklus. En detalje, der ser triviel ud, såsom en omvendt MPO-polaritet eller en forurenet endeflade, kan tage en hel skinne offline. For AI-infrastruktur hører kabling hjemme i arkitekturen fra starten, ikke som den sidste opgave før idriftsættelse.
Traditionel vs AI-Klar datacenterkabling
Kløften mellem traditionel og AI-klar kabling er et skift i designprioriteter, ikke kun et større kabelantal. Traditionelle designs optimerer til nutidens tilslutningsmuligheder; AI--klare design optimerer til hastighedsmigrering, tæthed, forudsigelig linkkvalitet og servicevenlighed over flere opgraderingscyklusser.
| Design faktor | Traditionel datacenterkabling | AI-klar datacenterkabling |
|---|---|---|
| Trafikmønster | Forudsigelig, ofte nord-syd tung | Tung øst-vest GPU-til-GPU-trafik over RDMA-stoffer |
| Hastighedsplanlægning | Størrelse til aktuelle netværkshastigheder | Planlagt til 400G og 800G, med en vej mod 1,6T |
| Tæthed | Moderat port- og fibertæthed | Parallel fiber med høj-densitet, base-8 og base-16 MTP/MPO |
| Kabelstyring | Behandles hovedsageligt som organisation | Behandles som en del af luftstrøm, oppetid og vedligeholdelse |
| Opgraderingssti | Kræver ofte gen-kablet | Modulært: skift optik og kassetter, behold fiberanlægget |
| Opretholdelse | Manuel sporing, langsommere | Testet, mærket, dokumenteret, med definerede veje |
Målet er et fiberanlæg, der kan optage mindst ét fartspring og én kapacitetsudvidelse uden et redesign.
Nøglekrav til kabelføring til AI-datacentre
Planlæg det fysiske lag for 400G og 800G, ikke kun dagens hastighed
AI-klynger bevæger sig hurtigt op ad hastighedsstigen, fra 100G mod 400G, 800G og til sidst 1,6T. 400G- og 800G-grænsefladerne er nu formelt standardiseret:IEEE 802.3df, godkendt i 2024, definerer MAC, fysiske lag og administrationsparametre for 400 Gb/s og 800 Gb/s Ethernet, herunder fysiske medietyper såsom 800GBASE-SR8 og 800GBASE-DR8. På udstyrssiden lever 400G typisk i formfaktorerne QSFP-DD eller QSFP112, mens 800G bruger OSFP eller QSFP-DD800. Hvis du sammenligner transceiver-emballage og banekortlægning, er detteQSFP-DD teknisk oversigter et nyttigt udgangspunkt.
Den praktiske regel: størrelse fibertype, fiberantal og stikbase, så planten overlever det næste spring. En trunk, der kun er dimensioneret til nutidens havnehastighed, bliver flaskehalsen i det øjeblik, skifte silicium og optik bevæger sig fremad.
Brug High-Density MTP/MPO Fiber til GPU-Cluster Connectivity
AI-links med høj-hastighed er parallel optik, og parallel optik kortlægges direkte på fiberantal. Et 400G-DR4-link bruger fire baner eller otte fibre, som almindeligvis afsluttes i en MPO-12 ferrule. Et 800G-SR8- eller 800G-DR8-link bruger otte baner eller seksten fibre, ofte en MPO-16 med APC-endeflader. Base-8 og base-16 MTP/MPO trunks parret med kassetter konsoliderer hundredvis af disse links pr. rack og forvandler implementeringen til gentagelige, fabrikstestede bevægelser i stedet for feltsplejsning. Forud afsluttetMTP/MPO trunk kablerog breakout-samlinger (MPO til LC eller MPO til MPO) er rygraden i denne tilgang.
Tætheden skal stadig planlægges, ikke maksimeres. At pakke fiber ind i et stativ uden at tænke på fyldning og luftstrøm skaber tilbage-tryk på udstyrets udstødning og gør porte umulige at servicere. Indstil opfyldningsforhold og slap-administrationsregler før, ikke efter, den første installation.
Administrer indføringstab, konnektorens renhed og polaritet
AI-optik med høj-hastighed er mindre tilgivende end de links, der kom før dem. PAM4-signaleringen, der bruges ved 400G og 800G, kører på strammere kanaltabsbudgetter end ældre NRZ-links, og hvert parret MPO- eller LC-par tilføjer indsættelsestab, ofte et par tiendedele af en decibel pr. forbindelse. På tværs af en struktureret kanal med flere forbindelsespunkter og en fiberlængde forsvinder budgettet hurtigt, så antallet af stik er en designvariabel, ikke en eftertanke. Sondringen mellem indsættelsestab og returtab, og hvorfor begge dele betyder noget på paralleloptik, er værd at forstå, før du færdiggør en kanal; denne forklaring påindstikstab i fibernetdækker mekanikken.
Kontaminering er en af de førende årsager til feltforbindelsesfejl, så hver endeflade bør inspiceres og renses før parring. Polaritet kræver et eksplicit skema (metode A, B eller C), og enkelt--mode parallelle links bruger generelt vinklede APC-stik til at kontrollere returtab. Bøjningsradius har betydning i tætte paneler, hvor bøjnings-ufølsom fiber køber margin. Pålidelighed her er en installations- og vedligeholdelsesdisciplin lige så meget som et komponentvalg.
Design en modulær, skalerbar struktureret-kablingsarkitektur
AI-infrastruktur ændrer sig på en kort cyklus, så en fabrik, der er svær at ændre, bremser enhver fremtidig implementering. Struktureret kabling, bygget af trunks, kassetter, kabinetter og definerede veje, lader teams tilføje kapacitet eller om-reraile et stof uden at-trække kabel igen.ANSI/TIA-942 specificerer minimumskravene til telekommunikationsinfrastruktur for datacentreog en kablingstopologi beregnet til at imødekomme fremtidige applikationer, hvilket er præcis den holdning, en AI-bygning har brug for. Med dette fundament bliver de fleste hastighedsopgraderinger et spørgsmål om at bytte optik og kassetter i stedet for at genopbygge det fysiske lag.
Før kabler til luftstrøm og køling i stativer med høj-densitet
AI-stativer er varme. Strømtætheden i de tætteste GPU-racks kan overstige 100 kW, og på disse niveauer forårsager overbelastede kabler direkte recirkulation og lokaliserede hot spots.ASHRAE TC 9.9 vejledning rammer termisk kontrol rundt om it-udstyrsindgangen og en ren adskillelse mellem varm-gang/kold-gang, og kabler enten understøtter det eller modarbejder det. I praksis betyder det overhead fiberbaner, hvor det er muligt, klar adskillelse af strøm og data, lodrette og horisontale administratorer, der er dimensioneret til det reelle kabelantal, disciplineret slæk og ruteføring, der aldrig blokerer bagudstødning eller et skorstensskab. Kabelstyring, der holder links sporbare, reducerer også menneskelige fejl under flytninger og ændringer.
DAC, AOC eller Structured Fiber? En AI-datacenter-kabelvalgsmatrix
Der er ikke noget enkelt bedste medium for en AI-klynge; det rigtige valg er drevet af rækkevidde og rolle. Inde i et stativ vinder kobber med kort-rækkevidde stadig på omkostninger, strøm og forsinkelse. Da links spænder over rækker og haller, bliver single-fiber den skalerbare rygrad. Matrixen nedenfor sammenligner de almindelige muligheder, som en designanmeldelse faktisk vejer dem.
| Valgmulighed | Typisk rækkevidde | Typisk hastighed | Hvor det passer | Medier og stik | Omkostninger og kraft | Den bedste-tilpasning |
|---|---|---|---|---|---|---|
| Passiv DAC | Op til ca. 3 m | Op til 400G (for eksempel 400G-CR8) | Intra-rack og tilstødende-rack-top-af-rack | Twinax kobber, integrerede ender | Laveste pris, laveste effekt, laveste latenstid | GPU eller server til at blade i samme eller næste rack |
| AOC | Få meter til omkring 30 m, i nogle tilfælde længere | 400G og 800G | Inden for en række, på tværs af nærliggende stativer | Multimode kerne, faste transceiverender | Lav effekt, ingen rengøring af endeflader i marken | Permanent server-til-at efterlade links uden for DAC-rækkevidde |
| Multimode struktureret fiber (OM4/OM5) | Tit af meter, op til omkring 100 m, kortere ved 800G | 400G og 800G SR/VR | Blad-ryg i en sal | OM4/OM5 med MTP/MPO og LC | Genanvendelig og brugbar | Kort blad-til-ryg og række-til-links |
| Single-mode struktureret fiber (OS2) | 500 m til 2 km (DR/FR), op til 10 km (LR) | 400G og 800G DR/FR/LR | Rygrad, kryds-rum, kryds-bygning | OS2 med MTP/MPO (APC) og LC/APC | Højeste rækkevidde og skalerbarhed | Spine uplinks, cross-hall og større GPU-stoffer |
Dette er også grunden til, at et tæppeudsagn som "fiber er altid foretrukket" kræver en advarsel: fiber er det skalerbare grundlag for stoffet, men en passiv DAC er stadig det bedre tekniske valg til en-meters hop inde i et stativ.
Sådan planlægges AI-datacenterkabling, trin for trin
Trin 1: Kortlæg AI-arbejdsbelastningen og netværkstopologien
Start med arbejdsbyrden. En stor træningspod, en flåde med høj-gennemstrømning, en HPC-klynge og en stor-lagringsinstallation deler ikke den samme trafikprofil. Kortlæg derefter, hvor GPU'en beregner (øst-vest), lager, nord-syd og ud-af-båndadministrationsnetværk. En ren slutningsimplementering har muligvis slet ikke brug for et stort øst-vest-stof, mens en træningspod med flere{10}rack vil. Design til den faktiske trafikstrøm, ikke kun stativets højde.
Trin 2: Lås nuværende og fremtidige hastighedsmål
Definer både den første fase og den næste. Hvis en pod kører 400G i dag og 800G næste år, skal fiberanlægget dimensioneres til 800G nu. Ud over den horisont er arbejdet med terabit-klasse Ethernet allerede i gang: denIEEE P802.3dj taskforce definerer 200G, 400G, 800G og 1,6 Tb/s drift ved hjælp af 200 Gb/s-per-banesignalering. At vide, hvor køreplanen er på vej, fortæller dig, hvor meget fiberantal og rutekapacitet du skal reservere.
Trin 3: Vælg medier og stik med margen
OS2-versus-OM4-spørgsmålet er for det meste et spørgsmål om rækkevidde. OM4 er fint til under-100 m blad-rygsøjleforbindelser, men rækkevidden krymper, når hastigheden stiger, så når først links krydser rækker eller haller, eller når du vil have 800G DR/FR frihøjde, er single-mode OS2 det sikrere fundament. Gennemgang afafstandsgrænser for OM1 til OM5 multimode fibergør afvejningen-konkret. Match MPO-basen (12 versus 16) til optikkens fiberkort, og planlæg polariteten tidligt; for paneler med høj-densitet detteMTP vs MPO valgguidedækker over de forskelle, der betyder noget. Hvor en transceiver og porthastighed ikke stemmer overens, planlæg breakouts (MPO til LC) i stedet for at improvisere på installationstidspunktet.
Trin 4: Planlæg stativtæthed, veje og luftstrøm sammen
Racklayout, kabelføring og køling er én beslutning i et AI-miljø med høj-densitet, ikke tre. Inden installationen skal du tælle, hvor mange kabler der kommer ind og ud af hvert rack, beslutte, hvor patchpaneler sidder, planlægge slæk og bekræfte, at en tekniker kan nå og udskifte en port uden at forstyrre direkte forbindelser. Efterlad væksthøjde i bakker og fyldforhold. Et rack, der ser rent ud ved idriftsættelse, bliver ubrugeligt efter to opgraderingscyklusser, hvis veje blev maxet på dag ét.
Trin 5: Test, dokumenter og vedligehold til specifikationer
Test hvert link til projektspecifikationen, hvilket for høj-hastighedsfiber betyder insertion-tabstest, OTDR, hvor det er relevant, polaritetsverifikation og endface-inspektion. Dokumenter hver port, trunk, kassette og vej, inklusive polaritetsskemaet, længden og det målte tab, med etiketter, der er knyttet til som-byggede tegninger. Vedligeholdelse bliver derefter rutine: endefladerengøring, periodiske audits og mærkning og ændringskontrol. Følgende lydpraksis for installation af fiberoptiske kablertil at trække spænding og bøjningsradius beskytter det tabsbudget, du testede for.
Hvad skal du forberede før en 400G- eller 800G-migrering
Migrationer fejler oftere på det fysiske lag end på optikken. Inden du skærer over, skal du gennemgå følgende:
- Bekræft fibertype og antal, og bekræft, at eksisterende OM4 stadig når målhastigheden, fordi den understøttede afstand falder, når linjehastigheden stiger.
- Kontroller, at konnektorbunden passer til den nye optik (MPO-12 versus MPO-16), og at polaritetsskemaet stadig holder ende til ende.
- Genberegn linktabsbudgettet for PAM4, reducer derefter antallet af forbindelser, hvor du kan, og gen-inspicer hver endeflade.
- Bekræft bane- og bakkekapacitet for de tilføjede kabler, og bekræft rackets termiske frihøjde for optik med højere-effekt.
- Scenekassetter, kufferter, etiketter og en testplan på forhånd, så cutover er et bytte-i, ikke et gen-træk.
Almindelige fejl at undgå
Dimensionering kun til dagens båndbredde.Et anlæg bygget til nuværende hastigheder dateres hurtigt. Indbyg en realistisk vej til højere hastighed og højere porttæthed.
Behandling af kabelhåndtering som kosmetik.Pæn kabelføring er nyttig, men styring handler i virkeligheden om luftstrøm, adgang og fejlisolering, ikke udseende.
Ofrer vedligeholdelsesadgang for tæthed.Høj-densitet er ikke "så kompakt som muligt." Hvis en tekniker ikke sikkert kan spore og erstatte en forbindelse, vil designet koste dig under reelle operationer.
Køb af komponenter isoleret.Kabler, stik, paneler, transceivere, stativer og stier danner én kanal. En del, der ser billig ud i sig selv, kan dække hele stoffet, når det skalerer.
AI-Tjekliste for klar kabelberedskab
Arbejd igennem disse, før du skalerer GPU'er. Hver vare har en konkret pasbetingelse, ikke et vagt ja eller nej.
- Hastigheds frihøjde:Kan den installerede fiber understøtte mindst ét hastighedsspring (f.eks. 400G til 800G) uden at gen-trække, og er fiberantallet tilpasset optikkens banekort (otte eller seksten fibre)?
- Tabsbudget:Er hver-højhastighedskanal inden for dens PAM4-indsættelses-tabsgodtgørelse med tilslutningsantal og inspektion af endeflade verificeret?
- Tæthed kontra service:Kan en tekniker nå, spore og erstatte enhver port uden at forstyrre en strømførende skinne?
- Luftstrøm:Holder stierne bagudstødningen og indeslutningen af gangene fri, og er strøm og data adskilt?
- Dokumentation:Er hvert link testet og registreret med dets polaritetsskema, længde og tab og mærket til at matche som-byggede tegninger?
- Skala:Strækker den blad-ryg, skinne-optimerede topologi sig til den næste pod uden et redesign?
- Mediepasning:Er hvert links medium valgt efter rækkevidde, hastighed, termisk påvirkning og servicevenlighed med DAC i-rack og OS2 på tværs af haller?
Hvis flere svar er nej, skal du omdesigne det fysiske lag før AI-arbejdsbelastninger skaleres, ikke efter den første udvidelse.
FAQ
Spørgsmål: Hvilke kabler har 400G og 800G AI-netværk brug for?
A: De kører på parallel optik over MTP/MPO fiber. Et 400G-DR4-link bruger otte fibre, almindeligvis en MPO-12, mens 800G-SR8 eller 800G-DR8 bruger seksten fibre, ofte en MPO-16 med APC. OM4 eller OM5 dækker kort rækkevidde, OS2 dækker længere rækkevidde, og passiv DAC håndterer de korteste in-rack-hop. Selve grænsefladerne er defineret i IEEE 802.3df.
Sp: Er single-mode eller multimode fiber bedre til AI-datacentre?
A: Det afhænger af afstanden. Multimode OM4 eller OM5 er omkostningseffektivt-til blad-rygsøjleforbindelser under ca. 100 m, men den understøttede afstand krymper ved 800G. Single-mode OS2 er det bedre grundlag, når først links krydser rækker eller haller, eller når du ønsker 800G DR/FR rækkevidde og fremtidig 1.6T frihøjde. Mange store stoffer standardiserer på OS2 af den grund.
Q: Hvornår skal et AI-datacenter bruge DAC, AOC eller optiske transceivere?
A: Brug passiv DAC til links op til omkring tre meter inde i eller mellem tilstødende racks, hvor det giver den laveste pris, strøm og latens. Brug AOC til permanente forbindelser fra et par meter til cirka snesevis af meter. Brug stikbare transceivere med struktureret fiber, når du har brug for rækkevidde, genbrug og mulighed for at servicere linket.
Spørgsmål: Hvordan beregner du et kabeltabsbudget for høj-links?
Sv: Start fra kanalindsættelses-tabsgodtgørelsen, som transceiverstandarden specificerer (f.eks. 800GBASE-SR8 eller 800GBASE-DR8). Træk fiberdæmpning ganget med længden plus tabet af hvert parret konnektorpar, som ofte er et par tiendedele af en decibel plus eventuelle splejsninger, og hold margenen i reserve. PAM4-budgetter er snævrere end ældre NRZ-links, så antallet af forbindelser og endefladerenhed afgør direkte, om en kanal består.
Spørgsmål: Hvordan påvirker kabling afkøling i AI-racks med høj-densitet?
Sv.: Overbelastede kabelbundter hindrer luftstrømmen, skaber tilbage-tryk på udstyrets udstødning og forårsager recirkulation og hot spots, hvilket betyder noget ved GPU-rackdensiteter, der kan overstige 100 kW. Overhead-veje, adskilt strøm og data, administratorer af korrekt størrelse og routing, der holder udstødning og indeslutning fri, beskytter alt sammen køledesignet.
Q: Er kobber stadig egnet til AI-datacentre?
A: Ja, kort sagt i-rack- og tilstødende-rackforbindelser, hvor DAC er det effektive valg. Høj-densitet og længere løb flytter til fiber for båndbredde, rækkevidde og skalerbarhed.
Q: Hvorfor er MTP/MPO-stik almindelige i AI-kabler?
A: De bærer otte til tyve-fire fibre i en enkelt bøsning, hvilket er præcis, hvad paralleloptik har brug for, og de muliggør forud-terminerede trunks til hurtige, gentagelige installationer med høj-densitet.
Nøgle takeaways
AI-arbejdsbelastninger omskriver krav til datacenterkabler omkring højere båndbredde, tættere parallel fiber, snævre tabsbudgetter, luftstrømsbevidst routing- og korte opgraderingscyklusser. Det fysiske lag vil ikke gøre GPU'er hurtigere alene, men det forkerte lag begrænser ydeevnen, pålideligheden og opgraderingshastigheden for hele miljøet.
Det sikreste designprincip er at planlægge fiberanlægget, banekapaciteten, patching-arkitekturen og dokumentationsmodellen, før GPU-rackene lander, ikke efter den første udvidelsescyklus. Byg til mindst ét hastighedsspring, vælg medier efter rolle i stedet for efter vane, og behandl stikrens renhed, polaritet og luftstrøm som første-designbegrænsninger. Før du implementerer eller udvider, skal du gennemgå dine nuværende kabler i forhold til tjeklisten ovenfor; for struktureret kabling og MTP/MPO-komponenter, udforsk voresfiberoptiske løsninger.
