Kunstmatige intelligentie verandert het ontwerp van datacenters. De meeste aandacht gaat naar GPU’s, versnellers en koeling, maar de laag die stilletjes bepaalt of de rest van de build slaagt, is de bekabeling. In een AI-cluster bepaalt de fysieke laag of je daadwerkelijk 400G en 800G kunt bereiken, of hogesnelheidsverbindingen schoon genoeg blijven om verkeer door te laten, of de luchtstroom een volledig gevuld rack overleeft en of je volgende snelheidssprong een kaartwissel of een upgrade van een vorkheftruck is.
Deze handleiding is geschreven voor infrastructuur- en optische-netwerkteams. Het legt uit wat AI-bekabeling anders maakt, welke vereisten er toe doen bij reële cijfers, hoe u DAC, AOC en gestructureerde glasvezel kunt vergelijken, een stap{2}}voor-stap planningsworkflow, wat u moet voorbereiden vóór een 400G- of 800G-migratie, en een checklist die u daadwerkelijk kunt gebruiken. De technische referenties hier zijn gebaseerd op de huidige IEEE 802.3- en ANSI/TIA-942-standaarden.
Waarom AI-workloads de bekabelingsvereisten voor datacenters veranderen
Traditionele bedrijfsdatacenters zijn gebouwd rond redelijk voorspelbaar applicatieverkeer, waarvan een groot deel noord-zuid is en zich verplaatst tussen gebruikers, applicaties en externe netwerken. AI-clusters keren dat patroon om. Tijdens training en gevolgtrekking op grote-schaal is de dominante stroom oost-west: GPU's wisselen voortdurend gradiënten en activeringen met elkaar uit via collectieve bewerkingen zoals all-reduceren, meestal via een RDMA-structuur (Direct Memory Access) op afstand.
Dit is zichtbaar in referentieontwerpen van leveranciers. NVIDIA bouwt het GPU-computernetwerk als een op RDMA-gebaseerd leaf-spine-fabric met behulp van eenrail-geoptimaliseerde topologie zodat elke GPU maximaal één hop van de andere is, wat ervoor zorgt dat multi-GPU-communicatie op schaal efficiënt blijft. Het gevolg van de bekabeling is het aantal poorten: een enkel acht-GPU-knooppunt kan acht 400G (of 800G) oost-west-poorten presenteren, en een trainingspod met meerdere leaf-switches per rack vermenigvuldigt trunkvezels en patching zeer snel.
Als de fysieke laag niet-gepland is, verschijnen de problemen niet op de eerste dag. Ze verschijnen later als verstopte paden die de luchtstroom verstikken, als foutisolatie die uren in plaats van minuten duurt, en als herbewerking tijdens de eerste upgradecyclus. Een detail dat er triviaal uitziet, zoals een omgekeerde MPO-polariteit of een vervuild eindvlak, kan een hele rail offline halen. Voor AI-infrastructuur hoort bekabeling vanaf het begin thuis in de architectuur, en niet als de laatste taak vóór de inbedrijfstelling.
Traditioneel versus AI-Ready datacenterbekabeling
De kloof tussen traditionele en AI-ready bekabeling is een verschuiving in de ontwerpprioriteiten, en niet alleen een groter aantal kabels. Traditionele ontwerpen optimaliseren voor de hedendaagse connectiviteit; Ontwerpen die klaar zijn voor AI- optimaliseren de migratiesnelheid, dichtheid, voorspelbare verbindingskwaliteit en onderhoudsgemak gedurende meerdere upgradecycli.
| Ontwerpfactor | Traditionele datacenterbekabeling | AI-ready datacenterbekabeling |
|---|---|---|
| Verkeerspatroon | Voorspelbaar, vaak noord-zuid zwaar | Zwaar oost-west GPU-naar-GPU-verkeer via RDMA-fabrics |
| Snelheidsplanning | Op maat gemaakt voor de huidige netwerksnelheden | Gepland voor 400G en 800G, met een pad richting 1,6T |
| Dikte | Matige poort- en vezeldichtheid | Parallelle glasvezel met hoge-dichtheid, basis-8 en basis-16 MTP/MPO |
| Kabelbeheer | Hoofdzakelijk behandeld als organisatie | Behandeld als onderdeel van luchtstroom, uptime en onderhoud |
| Upgrade-pad | Vereist vaak opnieuw-het trekken van de kabel | Modulair: verwissel optiek en cassettes, behoud de vezelinstallatie |
| Onderhoud | Handmatige tracering, langzamer | Getest, geëtiketteerd, gedocumenteerd, met gedefinieerde trajecten |
Het doel is een vezelfabriek die minstens één snelheidssprong en één capaciteitsuitbreiding kan opvangen zonder herontwerp.
Belangrijkste bekabelingsvereisten voor AI-datacenters
Plan de fysieke laag voor 400G en 800G, niet alleen de snelheid van vandaag
AI-clusters stijgen snel op de snelheidsladder, van 100G naar 400G, 800G en uiteindelijk 1,6T. De 400G- en 800G-interfaces zijn nu formeel gestandaardiseerd:IEEE 802.3df, goedgekeurd in 2024, definieert de MAC-, fysieke laag- en beheerparameters voor 400 Gb/s en 800 Gb/s Ethernet, inclusief fysieke mediatypen zoals 800GBASE-SR8 en 800GBASE-DR8. Wat de apparatuur betreft, heeft 400G doorgaans de vormfactor QSFP-DD of QSFP112, terwijl 800G OSFP of QSFP-DD800 gebruikt. Als u de verpakking van transceivers en het in kaart brengen van rijstroken vergelijkt, is dit het volgendeQSFP-DD technisch overzichtis een nuttig uitgangspunt.
De praktische regel: maat van het vezeltype, het aantal vezels en de basis van de connector, zodat de plant de volgende sprong overleeft. Een trunk die alleen is gedimensioneerd voor de huidige havensnelheid wordt het knelpunt op het moment dat het silicium en de optica van schakelaars vooruitgaan.
Gebruik MTP/MPO-glasvezel met hoge dichtheid voor GPU-clusterconnectiviteit
Hoge-snelheid AI-verbindingen zijn parallelle optica, en parallelle optica wordt rechtstreeks op het aantal vezels in kaart gebracht. Een 400G-DR4-verbinding maakt gebruik van vier rijstroken, oftewel acht vezels, die gewoonlijk eindigen in een MPO-12 ferrule. Een 800G-SR8- of 800G-DR8-verbinding gebruikt acht rijstroken, oftewel zestien vezels, vaak een MPO-16 met APC-eindvlakken. Base-8 en base-16 MTP/MPO-trunks in combinatie met cassettes consolideren honderden van deze links per rack en zetten de implementatie om in herhaalbare, in de fabriek geteste bewegingen in plaats van in veldsplitsing. Vooraf beëindigdMTP/MPO-trunkkabelsen breakout-assemblages (MPO naar LC of MPO naar MPO) vormen de ruggengraat van deze aanpak.
De dichtheid moet nog steeds worden gepland, niet gemaximaliseerd. Als u glasvezel in een rek verpakt, zonder na te denken over de vulling van het pad en de luchtstroom, ontstaat er tegen- druk op de uitlaatgassen van apparatuur en worden poorten onmogelijk te onderhouden. Stel opvulratio's in en pas -beheerregels toe vóór, en niet na, de eerste installatie.
Beheer invoegverlies, netheid van connectoren en polariteit
Hoge-snelheid AI-optiek is minder vergevingsgezind dan de links die eraan voorafgingen. De PAM4-signalering die wordt gebruikt bij 400G en 800G werkt met krappere kanaalverliesbudgetten dan oudere NRZ-verbindingen, en elk gekoppeld MPO- of LC-paar voegt invoegverlies toe, vaak een paar tienden van een decibel per verbinding. Via een gestructureerd kanaal met verschillende verbindingspunten en een stuk glasvezel verdwijnt dat budget snel, dus het aantal connectoren is een ontwerpvariabele en geen bijzaak. Het onderscheid tussen insertieverlies en retourverlies, en waarom beide van belang zijn bij parallelle optica, is het waard om te begrijpen voordat je een kanaal voltooit; deze uitlegger aaninvoegverlies in glasvezelnetwerkenomvat de mechanica.
Verontreiniging is een van de belangrijkste oorzaken van fouten in de veldverbinding, dus elk eindvlak moet vóór het paren worden geïnspecteerd en gereinigd. Voor polariteit is een expliciet schema nodig (methode A, B of C), en parallelle links met enkele-modus gebruiken over het algemeen schuine APC-connectoren om het retourverlies te beheersen. De buigradius is van belang bij dichte panelen, waar buig-ongevoelige vezels marge kopen. Betrouwbaarheid is hier net zo goed een installatie- en onderhoudsdiscipline als een componentkeuze.
Ontwerp een modulaire, schaalbare gestructureerde-bekabelingsarchitectuur
De AI-infrastructuur verandert in een korte cyclus, dus een installatie die moeilijk te wijzigen is, vertraagt elke toekomstige implementatie. Gestructureerde bekabeling, opgebouwd uit trunks, cassettes, behuizingen en gedefinieerde paden, stelt teams in staat capaciteit toe te voegen of een weefsel opnieuw- te herrailen zonder de- kabel opnieuw te hoeven trekken.ANSI/TIA-942 specificeert de minimale vereisten voor de telecommunicatie-infrastructuur voor datacentersen een bekabelingtopologie die bedoeld is om toekomstige toepassingen mogelijk te maken, wat precies de houding is die een AI-constructie nodig heeft. Met deze basis worden de meeste snelheidsupgrades een kwestie van het verwisselen van optica en cassettes in plaats van het opnieuw opbouwen van de fysieke laag.
Leid kabels voor luchtstroom en koeling in racks met hoge dichtheid
AI-rekken worden heet. De vermogensdichtheid in de dichtste GPU-racks kan hoger zijn dan 100 kW, en op die niveaus veroorzaakt overbelaste bekabeling direct recirculatie en plaatselijke hotspots.ASHRAE TC 9.9-geleidingsframes zorgen voor thermische controle rond de inlaat van IT-apparatuur en een schone warme-gang/koude-gangpadscheiding, en bekabeling ondersteunt dat of werkt dit tegen. In de praktijk betekent dit waar mogelijk bovengrondse glasvezelpaden, een duidelijke scheiding van stroom en data, verticale en horizontale managers die zijn afgestemd op het werkelijke aantal kabels, gedisciplineerde speling en routering die nooit de uitlaat aan de achterkant of een schoorsteenkast blokkeert. Kabelbeheer dat de verbindingen traceerbaar houdt, voorkomt ook menselijke fouten tijdens verplaatsingen en wijzigingen.
DAC, AOC of gestructureerde vezels? Een selectiematrix voor AI-datacenterbekabeling
Er bestaat niet één beste medium voor een AI-cluster; de juiste keuze wordt bepaald door bereik en rol. Binnen een rack wint koper met een kort-bereik nog steeds het op het gebied van kosten, stroom en latentie. Omdat verbindingen zich over rijen en hallen uitstrekken, wordt single-glasvezel de schaalbare ruggengraat. De onderstaande matrix vergelijkt de veel voorkomende opties zoals ze in een ontwerpbeoordeling daadwerkelijk worden afgewogen.
| Optie | Typisch bereik | Typische snelheid | Waar het past | Media en connector | Kosten en kracht | Beste-geschikte gebruikssituatie |
|---|---|---|---|---|---|---|
| Passieve DAC | Tot ongeveer 3 meter | Tot 400G (bijvoorbeeld 400G-CR8) | In-rack en aangrenzende-racktop-van-rack | Twinax koper, geïntegreerde uiteinden | Laagste kosten, laagste vermogen, laagste latentie | GPU of server om binnen hetzelfde of volgende rack te bladeren |
| AOC | Van enkele meters tot ongeveer 30 meter, in sommige gevallen langer | 400G en 800G | Binnen een rij, over nabijgelegen rekken | Multimode kern, vaste transceiveruiteinden | Laag vermogen, geen veldreiniging van de eindvlakken | Permanente server-om-links buiten het DAC-bereik te plaatsen |
| Multimode gestructureerde glasvezel (OM4/OM5) | Tientallen meters, tot ongeveer 100 m, korter bij 800G | 400G en 800G SR/VR | Blad-ruggengraat in een hal | OM4/OM5 met MTP/MPO en LC | Herbruikbaar en bruikbaar | Kort blad-naar-rug en rij-naar-rijlinks |
| Single{0}}gestructureerde glasvezel (OS2) | 500 m tot 2 km (DR/FR), tot 10 km (LR) | 400G en 800G DR/FR/LR | Ruggengraat, dwars-kamer, dwars-gebouw | OS2 met MTP/MPO (APC) en LC/APC | Hoogste bereik en schaalbaarheid | Spine-uplinks, cross-hall en grotere GPU-fabrics |
Dit is ook de reden waarom een algemene uitspraak als 'glasvezel heeft altijd de voorkeur' een voorbehoud verdient: glasvezel is de schaalbare basis voor de stof, maar een passieve DAC is nog steeds de betere technische keuze voor een sprong van één- meter in een rack.
Hoe u AI-datacenterbekabeling stap voor stap plant
Stap 1: Breng de AI-werklast en netwerktopologie in kaart
Begin met de werkdruk. Een grote trainingspod, een vloot met hoge-doorvoerinferentie, een HPC-cluster en een -opslagimplementatie delen niet hetzelfde verkeersprofiel. Breng vervolgens in kaart waar de GPU-computer- (oost-west), opslag-, noord-zuid- en out-of--bandbeheernetwerken met elkaar verbonden zijn. Voor een pure inferentie-implementatie is wellicht helemaal geen grote oost-west-infrastructuur nodig, terwijl een trainingspod met meerdere-racks dat wel nodig heeft. Ontwerp op basis van de daadwerkelijke verkeersstroom, niet alleen op de rackhoogte.
Stap 2: Vergrendel huidige en toekomstige snelheidsdoelen
Definieer zowel de eerste fase als de volgende. Als een capsule vandaag 400G draait en volgend jaar 800G, moet de vezelfabriek nu geschikt zijn voor 800G. Buiten die horizon is het werk aan terabit-klasse Ethernet al aan de gang: deDe IEEE P802.3dj-taskforce definieert 200G-, 400G-, 800G- en 1,6 Tb/s-werking met behulp van 200 Gb/s-per-baansignalering. Als u weet waar de routekaart naartoe gaat, weet u hoeveel vezels en trajectcapaciteit u moet reserveren.
Stap 3: Selecteer Media en connectoren met marge
De OS2-versus-OM4-vraag is meestal een bereikvraag. OM4 is prima voor sub-100 m leaf-spine-links, maar het bereik krimpt naarmate de snelheid stijgt, dus zodra links rijen of hallen kruisen, of als je 800G DR/FR-headroom wilt, is single-mode OS2 de veiligere basis. Het beoordelen van deafstandslimieten van OM1 tot en met OM5 multimode glasvezelmaakt de afweging-concreet. Zorg ervoor dat de MPO-basis (12 versus 16) overeenkomt met de glasvezelkaart van de optiek en plan de polariteit vroeg; voor panelen met hoge-dichtheid ditMTP versus MPO-selectiegidsomvat de verschillen die er toe doen. Als de snelheid van een transceiver en poort niet op één lijn liggen, plan dan breakouts (MPO tot LC) in plaats van te improviseren tijdens de installatie.
Stap 4: Plan de rackdichtheid, paden en luchtstroom samen
Rackindeling, kabelgeleiding en koeling zijn één beslissing in een AI-omgeving met hoge- dichtheid, en niet drie. Tel vóór de installatie hoeveel kabels elk rack binnenkomen en verlaten, bepaal waar de patchpanelen zitten, plan de speling en controleer of een technicus een poort kan bereiken en vervangen zonder de liveverbindingen te verstoren. Laat groeiruimte vrij in trays en vulverhoudingen. Een rack dat er bij de inbedrijfstelling schoon uitziet, wordt na twee upgradecycli onbruikbaar als de paden op dag één maximaal benut waren.
Stap 5: Testen, documenteren en onderhouden volgens specificaties
Test elke link volgens de projectspecificatie, wat voor hoge-snelheidsglasvezel betekent dat er sprake is van insertie-verliestests, OTDR waar van toepassing, polariteitverificatie en eindvlakinspectie. Documenteer elke poort, trunk, cassette en pad, inclusief het polariteitsschema, de lengte en het gemeten verlies, met labels die verwijzen naar as-built tekeningen. Onderhoud wordt dan routine: het reinigen van de eindvlakken, periodieke audits en controle op labels en wijzigingen. Geluid volgenpraktijk voor het leggen van glasvezelkabelsvoor trekspanning en buigradius beschermt het verliesbudget waarop u heeft getest.
Wat u moet voorbereiden vóór een 400G- of 800G-migratie
Migraties mislukken vaker op de fysieke laag dan op de optica. Voordat u gaat knippen, moet u het volgende doornemen:
- Bevestig het vezeltype en het aantal, en controleer of de bestaande OM4 nog steeds de doelsnelheid bereikt, omdat de ondersteunde afstand afneemt naarmate de lijnsnelheid stijgt.
- Controleer of de connectorbasis overeenkomt met de nieuwe optiek (MPO-12 versus MPO-16) en of het polariteitsschema nog steeds van begin tot eind klopt.
- Bereken het linkverliesbudget voor PAM4 opnieuw, verminder vervolgens het aantal verbindingen waar mogelijk en inspecteer elk eindvlak opnieuw.
- Bevestig de capaciteit van het pad en de lade voor de toegevoegde bekabeling, en bevestig de thermische ruimte in het rek voor optica met een hoger-vermogen.
- Podiumcassettes, trunks, labels en een testplan vooraf, zodat de overstap een swap-in, en geen re-pull is.
Veelvoorkomende fouten die u moet vermijden
Alleen op maat gemaakt voor de huidige bandbreedte.Een fabriek gebouwd voor de huidige snelheden veroudert snel. Bouw een realistisch pad in naar hogere snelheid en hogere havendichtheid.
Kabelmanagement behandelen als cosmetica.Nette bekabeling is handig, maar bij beheer gaat het eigenlijk om luchtstroom, toegang en foutisolatie, niet om uiterlijk.
Onderhoudstoegang opofferen voor dichtheid.Hoge-dichtheid is niet 'zo compact mogelijk'. Als een technicus een verbinding niet veilig kan traceren en vervangen, kost het ontwerp u tijdens echte werkzaamheden.
Componenten afzonderlijk kopen.Kabels, connectoren, panelen, transceivers, racks en trajecten vormen één kanaal. Een onderdeel dat er op zichzelf goedkoop uitziet, kan de hele stof bedekken wanneer deze schaalt.
AI-Ready-checklist voor gereedheid voor bekabeling
Werk deze door voordat u GPU's schaalt. Elk item heeft een concrete voorwaarde, geen vaag ja of nee.
- Snelheid hoofdruimte:Kan de geïnstalleerde glasvezel ten minste één snelheidssprong ondersteunen (bijvoorbeeld 400G naar 800G) zonder opnieuw te trekken, en wordt het aantal vezels aangepast aan de rijstrokenkaart van de optiek (acht of zestien vezels)?
- Verliesbudget:Is elk hoge-snelheidskanaal binnen de PAM4-invoeging-verlieslimiet, waarbij het aantal verbindingen en eindvlakinspectie zijn geverifieerd?
- Dichtheid versus service:Kan een technicus elke poort bereiken, traceren en vervangen zonder een live rail te verstoren?
- Luchtstroom:Houden de paden de uitlaat aan de achterkant en het gangpad vrij, en zijn stroom en data gescheiden?
- Documentatie:Wordt elke link getest en vastgelegd met het polariteitsschema, de lengte en het verlies, en gelabeld zodat deze overeenkomt met de-gebouwde tekeningen?
- Schaal:Strekt de blad{0}}ruggengraat-, rail-geoptimaliseerde topologie zich uit naar de volgende pod zonder een nieuw ontwerp?
- Mediageschikt:Wordt het medium van elke link gekozen op basis van bereik, snelheid, thermische impact en onderhoudsgemak, met DAC in-rack en OS2 in alle hallen?
Als meerdere antwoorden nee zijn, herontwerp dan de fysieke laag voordat de AI-workloads worden geschaald, en niet na de eerste uitbreiding.
Veelgestelde vragen
Vraag: Welke bekabeling hebben 400G- en 800G AI-netwerken nodig?
A: Ze draaien op parallelle optica via MTP/MPO-glasvezel. Een 400G-DR4-link gebruikt acht vezels, gewoonlijk een MPO-12, terwijl 800G-SR8 of 800G-DR8 zestien vezels gebruikt, vaak een MPO-16 met APC. OM4 of OM5 dekt een kort bereik, OS2 dekt een groter bereik, en passieve DAC verwerkt de kortste hops in het rack. De interfaces zelf zijn gedefinieerd in IEEE 802.3df.
Vraag: Is single{0}}mode of multimode glasvezel beter voor AI-datacenters?
A: Het hangt af van de afstand. Multimode OM4 of OM5 is kosteneffectief voor leaf-spinale links van minder dan ongeveer 100 m, maar de ondersteunde afstand wordt kleiner bij 800 G. Single-mode OS2 is de betere basis als u kruisrijen of hallen met elkaar verbindt, of als u 800G DR/FR-bereik en toekomstige 1,6T-ruimte wilt. Veel grote fabrics standaardiseren om die reden op OS2.
Vraag: Wanneer moet een AI-datacenter DAC-, AOC- of optische transceivers gebruiken?
A: Gebruik passieve DAC voor verbindingen tot ongeveer drie meter binnen of tussen aangrenzende racks, waar dit de laagste kosten, stroom en latentie oplevert. Gebruik AOC voor permanente verbindingen van enkele meters tot pakweg tientallen meters. Gebruik inplugbare transceivers met gestructureerde glasvezel als u bereik, hergebruik en de mogelijkheid om de verbinding te onderhouden nodig heeft.
Vraag: Hoe berekent u een budget voor kabelverlies voor hoge-snelheidsverbindingen?
A: Begin met de verliesmarge voor kanaalinvoeging- die de transceiverstandaard specificeert (bijvoorbeeld 800GBASE-SR8 of 800GBASE-DR8). Trek de vezelverzwakking vermenigvuldigd met de lengte af, plus het verlies van elk gekoppeld connectorpaar, dat vaak een paar tienden van een decibel bedraagt, plus eventuele splitsingen, en houd de marge achter de hand. PAM4-budgetten zijn krapper dan bij oudere NRZ-koppelingen, dus het aantal verbindingen en de netheid van de eindvlakken bepalen direct of een kanaal passeert.
Vraag: Welke invloed heeft de bekabeling op de koeling in AI-racks met hoge{0}}dichtheid?
A: Overbelaste kabelbundels belemmeren de luchtstroom, creëren tegendruk- op de uitlaatgassen van apparatuur en veroorzaken recirculatie en hotspots, wat van belang is bij GPU-rekdichtheden die meer dan 100 kW kunnen bedragen. Bovengrondse paden, gescheiden stroom en data, managers van de juiste grootte en routing die de uitlaatgassen en de omsluiting vrij houdt, beschermen allemaal het koelingsontwerp.
Vraag: Is koper nog steeds geschikt voor AI-datacenters?
A: Ja, voor kortsluiting in -rack- en aangrenzende- rackverbindingen, waarbij DAC de efficiënte keuze is. Hoge- dichtheid en langere runs worden overgezet naar glasvezel vanwege bandbreedte, bereik en schaalbaarheid.
Vraag: Waarom zijn MTP/MPO-connectoren gebruikelijk in AI-bekabeling?
A: Ze bevatten acht tot{0}}vierentwintig vezels in één enkele ferrule, wat precies is wat parallelle optica nodig heeft, en ze maken vooraf- afgesloten trunks mogelijk voor snelle, herhaalbare installaties met hoge- dichtheid.
Belangrijkste afhaalrestaurants
AI-workloads herschrijven de bekabelingsvereisten van datacenters rond hogere bandbreedte, dichtere parallelle vezels, krappe verliesbudgetten, luchtstroom-bewuste routering en korte upgradecycli. De fysieke laag zal GPU's op zichzelf niet sneller maken, maar de verkeerde laag beperkt de prestaties, betrouwbaarheid en upgradesnelheid van de hele omgeving.
Het veiligste ontwerpprincipe is het plannen van de glasvezelinstallatie, de padcapaciteit, de patcharchitectuur en het documentatiemodel voordat de GPU-rekken landen, en niet na de eerste uitbreidingscyclus. Bouw voor minstens één snelheidssprong, kies media op rol in plaats van op gewoonte, en beschouw de netheid, polariteit en luchtstroom van connectoren als eersteklas ontwerpbeperkingen. Controleer vóór implementatie of uitbreiding uw huidige bekabeling aan de hand van de bovenstaande checklist; voor gestructureerde bekabeling en MTP/MPO-componenten, bekijk onzeglasvezel oplossingen.
