Mellanox (NVIDIA Mellanox) 920-9B210-00FN-0D0 InfiniBand Switch Technische Oplossing

July 15, 2026

Mellanox (NVIDIA Mellanox) 920-9B210-00FN-0D0 InfiniBand Switch Technische Oplossing

Mellanox (NVIDIA Mellanox) 920-9B210-00FN-0D0 Technische oplossing InfiniBand-switch | Optimalisatie van interconnecties met lage latentie voor RDMA/HPC/AI-clusters

1. Analyse van projectachtergrond en vereisten

Moderne AI-trainingsframeworks en HPC-toepassingen worden steeds meer beperkt door de prestaties van netwerkverbindingen in plaats van alleen door de rekendichtheid. Gedistribueerde trainingstaken – vooral die waarbij gebruik wordt gemaakt van grote taalmodellen – genereren enorme, gesynchroniseerde, alles reducerende en alles-tot-alles verkeerspatronen die traditionele Ethernet-fabrics overweldigen. De belangrijkste vereisten voor bedrijfsimplementaties zijn onder meer: ​​schakellatentie van minder dan een microseconde om de communicatieoverhead te minimaliseren, niet-blokkerende doorvoer op schaal om overabonnement te elimineren, geavanceerde congestiecontrole om incast-bursts af te handelen, en naadloze integratie met RDMA via Converged Ethernet (RoCE) of native InfiniBand-ecosystemen. Bovendien eisen operationele teams diepgaande telemetrie voor proactieve foutdetectie en vereenvoudigd beheer in honderden havens.

2. Algeheel netwerk-/systeemarchitectuurontwerp

De voorgestelde architectuur concentreert zich op een tweelaagse leaf-spine-topologie, speciaal gebouwd voor GPU-centrische workloads. In de bladlaag herbergt elk rek deMellanox (NVIDIA Mellanox) 920-9B210-00FN-0D0als de primaire ToR-switch (Top-of-Rack), die tot 40 rekennodes verbindt via 400Gb/s NDR-verbindingen. De ruggengraatlaag bestaat uit een tweede laag920-9B210-00FN-0D0 MQM9790-NS2F 400Gb/s NDRswitches, die volledige mesh-connectiviteit bieden met 4:1-overabonnement, of volledig niet-blokkerend wanneer ze worden ingezet met voldoende ruggengraatpoorten. Dit ontwerp ondersteunt maximaal 512 GPU-nodes in één fabric-domein, met de optie om horizontaal te schalen via meerdere subnetten die met elkaar zijn verbonden via NVIDIA's UFM (Unified Fabric Manager).

De architectuur maakt gebruik van NVIDIA's SHARPv3 (Scalable Hierarchical Aggregation and Reduction Protocol) in-netwerk computerengine, waardoor collectieve bewerkingen rechtstreeks naar de switch-ASIC worden overgebracht. Dit vermindert het gegevensvolume dat de CPU/GPU-geheugenbussen passeert en vermindert de latentie van collectieve operaties met wel 40% in vergelijking met op software gebaseerde benaderingen. De920-9B210-00FN-0D0 InfiniBand-schakelaar OPNondersteunt ook adaptieve routering, die dynamisch het minst drukke pad voor elk pakket selecteert, waardoor een optimaal bandbreedtegebruik wordt gegarandeerd, zelfs onder asymmetrische verkeersbelasting.

3. Rol en belangrijkste kenmerken van de 920-9B210-00FN-0D0 in de oplossing

DeNVIDIA Mellanox 920-9B210-00FN-0D0fungeert als de fundamentele bouwsteen voor het gehele interconnect-weefsel. De belangrijkste rollen zijn onder meer:

  • Aggregatie met hoge dichtheid:Met maximaal 64 niet-blokkerende 400Gb/s-poorten in een 2U-vormfactor levert de switch een totale schakelcapaciteit van 25,6 Tb/s. Deze dichtheid vermindert het aantal benodigde switches per rack, waardoor de bekabeling wordt vereenvoudigd en het stroomverbruik per poort wordt verlaagd.
  • Schakelen met ultralage latentie:De switch handhaaft een latentie van minder dan 600ns voor elke pakketgrootte, wat van cruciaal belang is voor toepassingen die gevoelig zijn voor staartlatentie, zoals online inferentie en financiële HPC.
  • Computergebruik binnen het netwerk:SHARPv3-integratie maakt hardwareversnelling van collectieve activiteiten mogelijk, waardoor het aantal passages door de fabric wordt verminderd en de algehele voltooiingstijden van taken met maximaal 30% worden verbeterd.
  • Geavanceerde telemetrie en congestiecontrole:De schakelaar biedt inzicht per stroom, markeert overbelaste streams voor aanpassingen aan de hostzijde en maakt vroegtijdige waarschuwing bij beginnende hotspots mogelijk.

Volgens de920-9B210-00FN-0D0 gegevensbladondersteunt de switch zowel koperen als optische QSFP-DD-transceivers, waardoor deze920-9B210-00FN-0D0 compatibelmet de bestaande bekabelingsinfrastructuur in de meeste datacenters. De front-to-back luchtstroom en redundante voedingen zorgen voor een hoge beschikbaarheid in bedrijfsomgevingen.

4. Aanbevelingen voor implementatie en schaalbaarheid (typische topologie)

Voor een greenfield-implementatie van 128 GPU-nodes raden we een tweelaagse architectuur aan met 4 leaf-switches en 2 Spine-switches, waarbij elke Spine verbinding maakt met elke Leaf via 4x400Gb/s uplinks, wat resulteert in een overabonnementsratio van 2:1, wat acceptabel is voor de meeste trainingsbelastingen. Voor latentiegevoelige toepassingen of toepassingen met hoge bandbreedte kan een 1:1 niet-blokkerend ontwerp worden bereikt door het aantal wervelkolommen te verhogen naar 4, wat een totale uplinkcapaciteit oplevert die gelijk is aan de downlinkpoorten.

Als u verder kunt schalen dan 512 knooppunten, moet de infrastructuur in meerdere subnetten worden gepartitioneerd, die elk door UFM worden beheerd als een afzonderlijk fabric-eiland. Communicatie tussen subnetten kan worden gerouteerd via NVIDIA's Quantum-2-gateways of via hostgebaseerde routering, hoewel de aanbevolen aanpak voor prestatiegevoelige workloads is om de fabric waar mogelijk binnen één subnet te houden. De920-9B210-00FN-0D0-specificatiesondersteunen deze grootschalige topologieën, met ingebouwde flow control en op prioriteit gebaseerde flow control (PFC) om pakketverlies tijdens padomleidingsgebeurtenissen te voorkomen.

Bij het plannen van fysieke bekabeling kunt u overwegen om MPO-naar-QSFP-DD breakout-kabels te gebruiken voor rugbladverbindingen om de kabeldichtheid te verminderen, of actieve optische kabels (AOC's) voor afstanden groter dan 3 meter. De920-9B210-00FN-0D0 te koopbevat doorgaans een uitgebreide accessoirekit, maar we raden aan de compatibiliteit van transceivers van derden te valideren via de interoperabiliteitsmatrix van de leverancier om problemen met linktraining te voorkomen.

5. Bediening, bewaking en foutdiagnose

Operationele uitmuntendheid is een hoeksteen van de920-9B210-00FN-0D0 InfiniBand switch OPN-oplossing. De switch kan naadloos worden geïntegreerd met het UFM-platform van NVIDIA, dat het volgende biedt:

  • Realtime monitoring van de gezondheid van de stof:Dashboards voor verbindingsstatus, temperatuur, energieverbruik en fouttellers per poort (CRC-, symbool- en uitlijningsfouten).
  • Voorspellende foutanalyse:Machine learning-modellen op UFM identificeren proactief falende optica of verslechterende verbindingen voordat ze taakfouten veroorzaken.
  • Geautomatiseerde probleemoplossing:Het systeem beveelt corrigerende maatregelen aan, zoals het omleiden van verkeer of het isoleren van defecte verbindingen, waardoor de gemiddelde tijd tot oplossing (MTTR) aanzienlijk wordt verkort.

Voor geavanceerde diagnostiek ondersteunt de switch sFlow en port mirroring, waardoor diepgaande pakketinspectie voor foutopsporing op protocolniveau mogelijk wordt. Teams hebben ook toegang tot gedetailleerde informatie920-9B210-00FN-0D0-specificatiesvoor bufferdrempels en aanbevolen instellingen, met name voor het afstemmen van RoCEv2-verkeer bij gebruik in gemengde InfiniBand/Ethernet-omgevingen. Het afstemmen van prestaties moet zich richten op adaptieve routeringsdrempels en SHARPv3-aggregatie-intervallen, die per werklastfase kunnen worden aangepast, bijvoorbeeld training versus gevolgtrekking.

Routineonderhoud omvat firmware-updates, die met minimale verstoring worden uitgevoerd met behulp van de doorlopende upgrademogelijkheden van UFM, en periodieke reiniging van optische connectoren om de signaalintegriteit te behouden. De redundante voedings- en ventilatormodules van de switch maken hot-swap-vervanging tijdens bedrijf mogelijk.

6. Samenvatting en waardebeoordeling

DeMellanox (NVIDIA Mellanox) 920-9B210-00FN-0D0biedt een uitgebreide oplossing voor organisaties die de volledige prestaties van hun AI- en HPC-investeringen willen benutten. Door NDR-snelheden van 400 Gb/s, in-netwerk computing en intelligent congestiebeheer te combineren binnen één enkel, schaalbaar platform, pakt het de meest urgente interconnectie-uitdagingen aan waarmee de hedendaagse datacenters te maken hebben. De beschreven architectuur biedt een beproefd pad van pilotclusters met 128 knooppunten naar supercomputerfabrics met meer dan 2.000 knooppunten, met operationele tools die het beheer vereenvoudigen en de totale eigendomskosten verlagen.

Bij het beoordelen van de920-9B210-00FN-0D0 prijsHoud rekening met de waarde op de lange termijn: kortere voltooiingstijden van taken vertalen zich rechtstreeks in lagere cloudkosten of een snellere time-to-inzicht voor on-premise workloads. De920-9B210-00FN-0D0 InfiniBand switch OPN-oplossingwordt ondersteund door het wereldwijde ondersteuningsnetwerk en het uitgebreide partnerecosysteem van NVIDIA, waardoor organisaties hun infrastructuur met vertrouwen kunnen inzetten, schalen en optimaliseren voor de komende jaren.


Raadpleeg de ambtenaar voor een gedetailleerde planning920-9B210-00FN-0D0 gegevensbladEn920-9B210-00FN-0D0-specificatiesdocument, dat mechanische tekeningen, thermische profielen en prestatiebenchmarks omvat.