NVIDIA Mellanox MMA4Z00-NS Optische transceiver voor datacenters

NVIDIA Mellanox MMA4Z00-NS Data Center Optische Transceiver Technische oplossing Balancing Bandbreedte en afstand in Intra-Rack en Inter-Room Links

1. Achtergrond van het project en analyse van de vereisten

Als kunstmatige intelligentie training clusters schaal van duizenden tot tienduizenden GPU's,Datacenternetwerken worden geconfronteerd met ongekende uitdagingen in bandbreedte dichtheid en fysieke afstand tegelijkertijdNeem een typische AI (intelligent computing center) als voorbeeld.zijn GPU-computatie knooppunten zijn verdeeld over meerdere racks op dezelfde verdieping, evenals over twee kern machine kamers op aangrenzende verdiepingenDe netwerkvereisten zijn streng: lever 800G full-line-rate bandbreedte tussen alle computing nodes,ondersteunt zowel InfiniBand (voor directe GPU-communicatie) als Ethernet (voor opslag- en beheerfabrieken), en verbindingsafstanden van 5 meter (in-rack) tot 80 meter (inter-room) te dekken zonder dat er knelpunten ontstaan bij de vertaling van het protocol.

Traditionele ontwerpbenaderingen zijn meestal gebaseerd op een mix van verschillende transceivertypen: 800G SR8 voor korte afstandsverbindingen binnen het rack (tot 50 m over OM4),en 800G DR8/FR8 enkelmodusoplossingen voor langere verbindingen tussen kamersDeze multi-SKU-strategie creëert echter aanzienlijke operationele overhead in voorraadbeheer, kwalificatietests en reservedelenvoorziening.de hogere kosten en het hogere energieverbruik van enkelmodus-optica maken ze suboptimaal voor grootschaligeDe Commissie heeft in de loop van de afgelopen vijf jaar een aantal voorstellen ingediend voor de uitbreiding van deNVIDIA Mellanox MMA4Z00-NSwerd beoordeeld als een potentiële oplossing op één platform die beide afstandsdomeinen kan verenigen met behoud van protocolflexibiliteit en kostenefficiëntie.

2. Algemene ontwerp van netwerk/systeemarchitectuur

De voorgestelde architectuur heeft een spine-leaf-topologie met GPU-computatie-nodes die via 800G OSFP-poorten zijn verbonden met leaf-switches.en blaadschakelaars verbonden met ruggengraatschakelaars met hetzelfde type zend- en ontvangtoestel om de consistentie te behoudenDe belangrijkste architectonische beslissing was de standaardisering op een enkel optisch transceivermodel.NVIDIA Mellanox MMA4Z00-NS¢over alle verbindingssegmenten, van intra-rack tot inter-room, met behulp van de verbeterde DSP en het optische energiebudget om het effectieve bereik te vergroten tot meer dan de standaard 50-meter specificatie.

Om de signaalintegriteit over lange afstanden te maximaliseren, bevat de architectuur verschillende ontwerpprincipes:

• Optimalisatie van vezelfabrieken:Gebruik van hoogwaardige OM4-multimodevezels (minimale effectieve modale bandbreedte ≥ 4700 MHz·km) voor alle verbindingen, met MPO-12 APC-connectoren om het inbrengverlies en de reflectie terug te minimaliseren.Struktureerde bekabelingsroutes zijn ontworpen om strakke bochten en overmatige patch-panel hops te voorkomen.
• Link begrotingsreserve:De architectonische verliesbegroting wordt voor alle verbindingen onder de 3,0 dB gehouden, waardoor een adequate marge voor deMMA4Z00-NSDit wordt bereikt door het aantal gekoppelde verbindingsparen te beperken tot maximaal vier per verbinding.
• Protocol-agnostisch doorsturen:De leaf switches (NVIDIA Spectrum-4 voor Ethernet en Quantum-2 voor InfiniBand) zijn geconfigureerd om deMMA4Z00-NS 2x400G InfiniBand/Ethernetde operationele modus, die een dynamische protocoltoewijzing per poort mogelijk maakt zonder hardwarewijzigingen.

De architectuur ondersteunt zowel single-rack- als multi-rack-implementaties.MMA4Z00-NSHet dient als de universele fysieke laag die alle afstanden mogelijk maakt.

3De rol van de NVIDIA Mellanox MMA4Z00-NS en de belangrijkste kenmerken

In de kern van deze oplossing staat deNVIDIA Mellanox MMA4Z00-NSHet systeem functioneert als een verenigde fysieke laagbrug, waardoor de noodzaak van meerdere transceivertypen wordt weggenomen.

De gedetailleerdeMMA4Z00-NS-gegevensbladbevat uitgebreide optische en elektrische specificaties, met inbegrip van de eigenschappen van de zender en de ontvanger,die werden gebruikt om de berekeningen van het budget voor de koppeling voor alle segmenten van deze inzet te valideren. deMMA4Z00-NS specificatieseen typisch zendvermogen van -2,5 dBm tot en met 4,0 dBm en een ontvangersensitiviteit van -6,5 dBm (BER 5E-8) bevestigen, waardoor de voor het doelwit van 80 meter noodzakelijke optische kopruimte wordt geboden.

Functioneel is deMMA4Z00-NS 800G OSFP SR8-transceiverfunctioneert door acht rijstroken van 100G PAM4-elektrische signalen van de switch ASIC te aggregeren, om te zetten in optische signalen en over parallelle multimode vezels te verzenden via de MPO-12-interface.Aan de ontvangende zijde, de geïntegreerde DSP voert klok en gegevensherstel, evenwicht en demultiplexing terug naar het elektrische domein.Deze verwerkingspijplijn is van cruciaal belang voor het behoud van de signaalintegrititeit over langere afstanden, waar modale verspreiding en verzwakking anders de prestaties zouden verminderen.

4. Aanbevelingen voor implementatie en schaalbaarheid (met typische topologie)

Voor een optimale inzet van deNVIDIA Mellanox MMA4Z00-NS, worden de volgende topologie- en bekabelingsaanwijzingen aanbevolen:

Typische topologie:

• Tier 1 (Intra-Rack, ≤ 15 m):Direct MPO-12 patchcords tussen GPU-computatie-nodes en top-of-rack (TOR) switches.MMA4Z00-NSis aan beide uiteinden geïnstalleerd.
• Tier 2 (Cross-Rack, 15 ¢ 45 m):Vooraf beëindigde MPO-stamkabels die door bovenopgelegde bakken lopen en TOR-schakelaars verbinden met bladaggregatie-schakelaars.
• Niveau 3 (Inter-Room, 45×80m):Structured cabling met versterkte MPO-stammen, met behulp van hoek-polige connectoren en minimale splicing.

Checklijst voor inzet:

• Alle glasvezelverbindingen worden gevalideerd met behulp van een optische tijddomeinreflectometer (OTDR) en een stroommeter om het verlies onder de 3,0 dB te bevestigen.
• Configureer de schakelpoorten naar het gewenste protocol (InfiniBand of Ethernet) en controleer of deMMA4Z00-NSautomatisch onderhandelt over de juiste werkwijze perMMA4Z00-NS-gegevensblad.
• Voor gemengde 400G/800G-omgevingen moet de 2×400G-splitmodus op geselecteerde poorten worden ingeschakeld.MMA4Z00-NS 2x400G InfiniBand/Ethernetde mogelijkheid om twee 400G-verbindingen vanuit één enkele transceiver te ondersteunen.
• Infaseer: begin met een enkel rack, controleer BER- en latentie-metrics, breid vervolgens uit tot cross-rack- en inter-room-verbindingen.

Voor grootschalige uitbreidingen boven de 80 meter wordt aanbevolen om alleen voor de langste backbone-verbindingen actieve optische kabels (AOC's) of single-mode-oplossingen te plaatsen, waarbij deMMA4Z00-NS 800G OSFP SR8-transceiveroplossingVoor de overgrote meerderheid van de leaf-to-spine en computing-to-leaf verbindingen.

5Operaties, monitoring, probleemoplossing en optimalisatie

DeMMA4Z00-NSis ontworpen voor eenvoudige werking, met uitgebreide digitale diagnostische monitoring (DDM) via de I2C-interface.

• Real-time monitoring:NVIDIA's netwerkbeheerplatforms kunnen waarschuwingen uitzenden wanneer drempels worden benaderd,proactief onderhoud mogelijk maken.
• Link Marge:Gebruik de DSP-afstemmingsmogelijkheden om tijdens de installatie en als onderdeel van de driemaandelijkse gezondheidscontroles linkmargin-tests uit te voeren.MMA4Z00-NSOndersteunt op aanvraag-equalization-aanpassingen via firmware, die geleidelijke veroudering van vezels of afbraak van connectoren kunnen compenseren.
• Foutisolatie:Als een verbinding een hoge BER of signaalverlies heeft, moeten de DDM-gegevens van beide uiteinden van de verbinding worden vergeleken.Veel voorkomende storingsmodussen zijn vuile/besmette MPO-connectoren (reinig met cartridge-achtige reinigers), overmatig buigverlies (controleer de fysieke routing) of degradatie van de zender (controleer de trend van de vertekening van de stroom en het optische vermogen).
• Firmware-updates:NVIDIA brengt regelmatig firmware-updates uit die de gelijkstellingsalgoritmen kunnen verbeteren en de compatibiliteit kunnen verbeteren.MMA4Z00-NSDe eenheden zijn op de nieuwste firmwareversie volgens de fabrikant.

Om de prestaties te optimaliseren, wordt aanbevolen om een baseline sweep uit te voeren van alle koppelingen bij 800G en bij 2×400G-modi, waarbij optische vermogen en BER-statistieken worden geregistreerd.Deze basislijn dient als referentie voor toekomstige probleemoplossing en capaciteitsplanningBovendien heeft deMMA4Z00-NS te koopde beschikbaarheid via gestandaardiseerde wereldwijde distributie zorgt ervoor dat reserve-eenheden snel kunnen worden verkregen, waardoor de stilstandstijd bij storingen tot een minimum wordt beperkt.

6Samenvatting en waardebeoordeling

DeNVIDIA Mellanox MMA4Z00-NSbiedt een aantrekkelijke unified optische oplossing voor moderne AI-datacenters die een balans moeten vinden tussen hoge bandbreedte en verschillende fysieke afstanden.Door de standaardisering van een enkel transceivertype voor zowel intra-rack- als inter-room-verbindingen, de architectuur vermindert de complexiteit van de voorraad, stroomlijnt de kwalificatieprocessen en vereenvoudigt het onderhoud,Het gebruik van de geavanceerde DSP- en optische mogelijkheden van de module om het bereik te vergroten buiten de traditionele SR8-limieten.

Belangrijkste waarde-resultaten:

• Vergemakkelijking van de inventarisatie:Een enkele SKU vervangt meerdere transceivertypen en vermindert de reservehoudkosten met naar schatting 60%.
• Kostenefficiëntie:De infrastructuur voor multimode vezels is aanzienlijk goedkoper dan een enkelmodusinstallatie, en deMMA4Z00-NS prijsDe prijs per haven is aanzienlijk lager dan bij gelijkwaardige DR8/FR8-alternatieven.
• Flexibiliteit voor de toekomst:De 2×400G split-modus biedt een opstart voor omgevingen die nog niet volledig 800G-klaar zijn, terwijl de 800G-modus tegenwoordig GPU-clusters van de volgende generatie ondersteunt.
• Operationeel weerbaar:Robuuste DDM, proactieve waarschuwing en DSP-parameters die op het veld kunnen worden afgestemd, zorgen ervoor dat koppelingen gedurende hun gehele levensduur binnen de specificaties blijven.

Voor netwerkarchitecten, oplossingsengineers en operationele teams is deMMA4Z00-NSHet is een praktische, hoogwaardige en kosteneffectieve hoeksteen voor het bouwen van schaalbare AI-netwerken die zonder compromissen over racks en ruimtes kunnen strekken.MMA4Z00-NS-gegevensbladen ondersteunende technische documentatie beschikbaar zijn om de integratieplanning en de validatie van de inzet te vergemakkelijken.