Mellanox (NVIDIA Mellanox) MFS1S00-H005V AOC Actieve optische kabel Toepassingspraktijk

Mellanox (NVIDIA Mellanox) MFS1S00-H005V AOC Active Optical Cable Application Practice voor korte afstands-hoge snelheid Inter-Rack Interconnect en kabelvergemakkelijking

Achtergrond en uitdagingen: de knelpunt van de bekabeling in de inter-rackconnectiviteit

Een nationaal supercomputingcentrum heeft een onverwachte knelpunt ondervonden na het upgraden van zijn InfiniBand HDR 200G-netwerk.elk met 16 GPU-servers, waarbij elke server twee 200G uplinks vereist naar de top-of-rack (ToR) Leaf-switch.De QSFP56 SR4-transceivers werden aan de bovenkant van elk rack geplaatst.Deze oplossing heeft tijdens de eerste implementatie meerdere problemen veroorzaakt.de kabelverspreiding was ernstig over 300 vezelverbindingen waren vereist tussen de 48 rekkenIn de tweede plaats was het falen van de optische modules bijzonder hoog.de operatieteam registreert gemiddeld 3 tot 4 vervangingen van modules per week gedurende de eerste drie maanden na de inzet;Ten derde vereiste elke MPO-springer nauwkeurig polariteitsbeheer en -reiniging.het toevoegen van 15 tot 20 minuten per verbinding tijdens de eerste opnameDe operationele leiding vatte de uitdaging samen: "We hadden een oplossing nodig die dezelfde 200G-prestaties kon leveren, maar met minder componenten, eenvoudiger hanteren,en drastisch verminderde veldfalen. "

Oplossing en implementatie: invoering van de MFS1S00-H005V actieve optische kabel

Om deze pijnpunten aan te pakken, heeft het centrum verschillende alternatieven geëvalueerd en uiteindelijk de meestMFS1S00-H005Vvan Mellanox (NVIDIA Mellanox)MFS1S00-H005V 200G QSFP56 AOC-kabelDe optische transceiver en de glasvezel worden in één, vooraf afgesloten verzameling geïntegreerd.MFS1S00-H005V InfiniBand HDR 200Gb/s actieve optische kabel, het elimineert de noodzaak van afzonderlijke modules en springers,een plug-and-play-interconnectie met een lengte van maximaal 50 meter aanbieden, ideaal voor de tussen de racks in deze faciliteit typische afstanden van 5 tot 15 meter.

In fase 1 werd alle Leaf-to-Leaf-interconnecties in de kernwervelkolom vervangen door de nieuwe Leaf-to-Leaf-interconnector.NVIDIA Mellanox MFS1S00-H005V, waarbij wordt bevestigd dat deMFS1S00-H005V-compatibelFase 2 breidde de AOC-implementatie uit tot de top-of-rack uplinks, waarbij elk rekenknooppunt werd verbonden met de Leaf-switches.Fase 3 gericht op de GPU-to-storage structuur, waar deMFS1S00-H005V 200G QSFP56 AOC kabeloplossingHet team vertrouwde op de resultaten van de onderzoekers.MFS1S00-H005V-gegevensbladom de verbindingsbudgetten te controleren en ervoor te zorgen dat het bereik van 50 meter voldoende is voor de langste loop (gemeten op 37 meter inclusief service-lussen).

Een belangrijk voordeel van de AOC-benadering was de eliminatie van de afzonderlijke reinigingsstap van de transceiverMFS1S00-H005Vde aansluiting is in de fabriek getest en verzegeld, waarbij alleen een visuele inspectie van de eindkant van de aansluiting voorafgaand aan de installatie vereist is.Het team gebruikte kleurgebonden kabelboten om de verbinding tussen blad en ruggengraat te onderscheiden van die tussen blad en computer., waarbij de documentatie verder wordt vereenvoudigd.

Resultaten en voordelen: tastbare verbeteringen in betrouwbaarheid en operationele efficiëntie

De statistieken na de inzet toonden aanzienlijke winst in meerdere dimensies.MFS1S00-H005V specificaties- met inbegrip van een typisch stroomverbruik van minder dan 1,5 W per eind en een BER van minder dan 1e-15 Het centrum rapporteert geen link-gerelateerde mislukkingen in de twee maanden na de overstap.De volgende tabel geeft een samenvatting van de belangrijkste verbeteringen:

Het operatieteam merkte ook op dat deMFS1S00-H005VDe flexibele mantel van de kabel en de minimale buigradius van 30 mm maakten een veel nettere routing binnen de kabelbakken mogelijk, waardoor de noodzaak van kabelbanden werd verminderd en de luchtstroom werd verbeterd.Het centrum vond dat terwijl deMFS1S00-H005V prijsper eenheid was iets hoger dan de aparte combinatie module plus jumper per verbinding, de eliminatie van reserveinventaris, verminderde probleemoplossingsarbeid,De totale kosten van eigendom (TCO) zijn gunstigder geworden door een bijna-nul falenpercentage.. deMFS1S00-H005V te koopDe Commissie heeft de Commissie verzocht om een evaluatie van de resultaten van de evaluatie van het NVIDIA-project.

Samenvatting en vooruitzichten: een blauwdruk voor vereenvoudigde HDR-stoffen

Het supercomputingcentrum heeft deMFS1S00-H005VHet toont aan hoe actieve optische kabels de connectiviteit tussen racks in HDR 200G-omgevingen drastisch kunnen vereenvoudigen.de AOC-benadering vermindert het aantal onderdelenVoor netwerkarchitecten en IT-managers die te maken hebben met soortgelijke problemen op het gebied van kabeldensiteit, is deNVIDIA Mellanox MFS1S00-H005VHet is een bewezen weg naar een hogere betrouwbaarheid en lagere operationele overhead.MFS1S00-H005V-gegevensbladHet centrum is nu van plan de AOC-strategie uit te breiden naar zijn nieuwe GPU-uitbreidingsvleugel,Het is de bedoeling dat de Europese Commissie de volgende maatregelen zal nemen:.