NVIDIA Mellanox MCX4121A-ACAT Server Adapter in Actie | RDMA/RoCE Lage Latentie Transport & Server

Aangezien gedistribueerde opslag, HPC-clusters en AI-trainingspijplijnen snel schalen, wordt de traditionele TCP/IP-stack een knelpunt voor interne communicatie in datacenters.Hoge CPU-overhead en microseconde-latentie belemmeren de prestaties van applicatiesVoor architecten en IT-managers die op zoek zijn naar een praktisch upgradepad, is deMCX4121A-ACAT-gebaseerde RDMA/RoCE-oplossing heeft bewezen resultaten opgeleverd in real-world implementaties.

Achtergrond en uitdaging: de prestatiekloof van 10 GbE tot 25 GbE

In een recent project voor de modernisering van datacenters bij een middelgrote cloudserviceprovider bleek het bestaande 10GbE TCP/IP-gebaseerde opslagnetwerk twee kritieke pijnpunten te hebben.Backup van databases en NVMe over Fabrics-verkeer met TCP-stacklatentie van meer dan 50 microsecondenTen tweede waren de CPU-cores overbelast, bijna 30% van de verwerkingskracht werd verbruikt door netwerkonderbrekingen en data kopieeroperaties.onvoldoende middelen achterlaten voor zakelijke toepassingenHet team had een oplossing nodig die zowel 25GbE bandbreedte kon leveren als kernel bypass met directe geheugentoegang op afstand kon mogelijk maken.

Oplossing: implementeren van NVIDIA Mellanox MCX4121A-ACAT met RoCE

Na een rigoureuze evaluatie heeft de klant deNVIDIA Mellanox MCX4121A-ACATGebouwd op de ConnectX-4 Lx-architectuur,deze SFP28-adapter met twee poorten levert een lijnsnelheid van 25 GbE per poort en integreert RoCE (RDMA over Converged Ethernet) hardware-offloadmotorenDe ingenieurs hebben deMCX4121A-ACAT Ethernet-adapterkaartin standaard x86-server PCIe 3.0 x8-slots, gekoppeld aan PFC/ECN-compatibele 25GbE-switches om een verliesloze Ethernet-fabriek te creëren.

Aan de softwarezijde heeft het team de RoCE v2-modus ingeschakeld met behulp van de Mellanox OFED-driver en kritische opslagwerklasten (Ceph OSD en NVMe-oF-gateways) aan RDMA-interfaces gekoppeld.MCX4121A-ACAT ConnectX-4 Lx met twee poorten 25GbE SFP28Voor gedetailleerde thermische en energie-specificaties, deMCX4121A-ACAT-gegevensbladgeeft volledige technische richtlijnen.

Resultaten en voordelen: 5x lagere latentie, 1,7x hogere doorvoer

Na twee weken van gray-release validatie heeft het projectteam dramatische verbeteringen gemeten.De gemiddelde latentie van de blokoverdracht tussen knooppunten is gedaald van 52 μs tot slechts 9 μs·a, een vermindering van meer dan 80%Wat de doorvoer van de servers betreft, is deSpecificaties van MCX4121A-ACATde beloofde line-rate dual-port-prestaties, die volledig werden gevalideerd: een enkel knooppunt dat gelijktijdig iSCSI- en NVMe-oF-verkeer verwerkt, behaalde een totale doorvoer van 46,8 Gbit/s,naderen van het theoretische maximumHet belangrijkste is dat met RDMA die directe toegang tot het geheugen mogelijk maakt, het gebruik van de CPU voor netwerkverwerking is gedaald van 32% naar 6%.Het resultaat is 1.7x de totale toepassing van de liftprestaties.

De operatieteams ontdekten ook dat de SR-IOV-virtualisatiemogelijkheden van de adapter uitblongen in grootschalige containeromgevingen.MCX4121A-ACAT-compatibelDe adapter werkt perfect met de belangrijkste Linux distributies, VMware ESXi en Kubernetes Multus-CNI plug-ins.MCX4121A-ACAT Ethernet adapter kaart oplossingals basiscomponent voor hun volgende generatie hyperconvergente infrastructuurspecificatie.

Referentie voor kosten en aanbestedingen

Voor budgetbewuste teams is deMCX4121A-ACAT prijsDe huidige kanalenlijsten tonen aan dat deMCX4121A-ACAT te koopDe kosten van de HBA's zijn ongeveer $460 – $520 per eenheid (afhankelijk van de volledige hoogte), wat een besparing van meer dan 40% TCO vertegenwoordigt in vergelijking met gelijkwaardige HBA's of InfiniBand-oplossingen.Precieze offertes zijn beschikbaar via geautoriseerde NVIDIA distributeurs.

Samenvatting en vooruitzichten: van opslagversnelling tot volledige dekking van datacenters

Deze casestudy toont aan dat deMCX4121A-ACAT-gebaseerde RDMA/RoCE-oplossing levert bijna-Infiniband latency-kenmerken zonder het Ethernet-ecosysteem te verlaten, terwijl de efficiëntie van de server drastisch wordt verhoogd.de dienstverlener van plan is deNVIDIA Mellanox MCX4121A-ACATVoor netwerkingenieurs en -architecten die datacenter-upgrades plannen, is het mogelijk om de mogelijkheden van 25GbE-fabrieken verder te ontgrendelen.Deze adapter biedt een pragmatische combinatie van prestaties, compatibiliteit en schaalbaarheid.