NVIDIA Mellanox MCX631432AN-ADAB Server Adapter in Azione: Trasporto a Bassa Latenza RDMA/RoCE e Guadagni di Throughput del Server

Nei moderni ambienti data center, lo storage distribuito, i cluster di formazione AI e le piattaforme di transazione ad alta frequenza condividono tutti un collo di bottiglia comune: latenza di rete e sovraccarico della CPU causati dai tradizionali stack TCP/IP. Per un fornitore di servizi cloud di medie dimensioni alle prese con prestazioni di archiviazione incoerenti e collegamenti di accesso 25GbE congestionati, la ricerca di una vera soluzione con scarico dell'hardware lo ha portato alla soluzioneNVIDIA Mellanox MCX631432AN-ADAB. Questo caso di studio applicativo esamina il modo in cuiMCX631432AN-ADAB Scheda adattatore Ethernethanno trasformato la loro infrastruttura dall'imprevedibilità legata alla CPU al funzionamento a velocità di linea e a bassa latenza.

Contesto e sfida: il costo della rete convenzionale

L'ambiente legacy del provider si basava su NIC standard da 25 GbE con iSCSI e NFS basati su software. Con l’aumento della densità delle VM, è aumentato anche l’utilizzo della CPU sui nodi di storage, spesso superando il 60% solo per l’elaborazione di rete. I picchi di latenza durante le finestre di backup e le migrazioni in tempo reale causavano timeout delle applicazioni. Gli architetti avevano bisogno di una soluzione 25GbE a doppia porta in grado di ridurre il carico di trasporto, rafforzare la sicurezza hardware e supportare RDMA senza riscritture delle applicazioni. Dopo aver esaminato ilScheda tecnica MCX631432AN-ADABe il feedback iniziale della comunità, hanno selezionato ilMCX631432AN-ADAB ConnectX-6 Lx SFP28 a doppia porta 25GbEdesign come base per la revisione della rete.

Soluzione e distribuzione: abilitazione di RoCE per archiviazione ed elaborazione

L'implementazione ha sostituito le NIC esistenti in 120 nodi di elaborazione e 15 server di archiviazione conMCX631432AN-ADABadattatori. Ogni adattatore è stato configurato per RoCE (RDMA over Converged Ethernet) utilizzando ECN e PFC sugli switch spine-leaf esistenti. I passaggi chiave includevano:

• Abilitazione dell'avvio affidabile dell'hardware e dell'offload IPsec in linea su tutti gli adattatori per soddisfare i requisiti di conformità.
• Migrazione del traffico storage da iSCSI a NVMe over Fabrics (NVMe-oF) con trasporto RoCE, completamente supportato dalSoluzione con scheda adattatore Ethernet MCX631432AN-ADABpila.
• Distribuzione della telemetria basata su Cumulus Linux di NVIDIA per monitorare le prestazioni RoECE per porta e le notifiche di congestione.

Secondo il funzionarioSpecifiche MCX631432AN-ADAB, l'adattatore offre una latenza hardware inferiore a 800 ns e supporta un throughput bidirezionale fino a 200 Gb/s se abbinato a host PCIe 4.0. In pratica, il team di ingegneri ha misurato una latenza costante a livello di applicazione di 1,5 µs per le letture NVMe-oF, un miglioramento di 14 volte rispetto al precedente percorso iSCSI del software. L'utilizzo della CPU sui server di storage è sceso dal 58% a solo l'11% durante i test IOPS di picco, grazie all'offload completo del protocollo e alla moderazione dinamica degli interrupt.

Risultati misurabili e vantaggi aziendali

Dopo quattro settimane di produzione, il fornitore ha riportato tre vantaggi principali:

• Incremento della produttività:Ciascun nodo di storage ora satura entrambe le porte 25GbE (49,5 Gbit/s aggregati) mantenendo un jitter inferiore al microsecondo, rispetto al precedente throughput effettivo di 18 Gbit/s.
• Consistenza della latenza:La latenza di scrittura del 99° percentile per i database distribuiti è scesa da 780 µs a 94 µs, eliminando i timeout durante il ribilanciamento del cluster.
• Semplicità operativa:Un set di driver gestisce sia gli adattatori di calcolo che quelli di archiviazione; ILCompatibile MCX631432AN-ADABL'ecosistema include tutte le principali distribuzioni Linux, consentendo aggiornamenti del kernel senza tempi di inattività.

Inoltre, il team ha valutato ilPrezzo MCX631432AN-ADABrispetto al costo totale di proprietà e ha scoperto che il root-of-trust hardware dell'adattatore e l'offload RoCE hanno eliminato la necessità di dispositivi di crittografia separati e RNIC dedicati, con un TCO triennale inferiore del 33%. Per le organizzazioni che intendono espandersi,MCX631432AN-ADAB in venditaattraverso i principali distributori offre ora prezzi a volume, rendendo gli aggiornamenti su larga scala finanziariamente sostenibili.

Riepilogo e prospettive

ILNVIDIA Mellanox MCX631432AN-ADABsi è rivelato più di una semplice interfaccia di rete: è diventato il facilitatore di un vero tessuto convergente a bassa latenza. Spostando l'elaborazione del trasporto dalla CPU al silicio, il provider ha sbloccato tutto il potenziale del proprio storage NVMe e ridotto il consumo energetico per server di 18 W in media. Poiché i data center continuano ad adottare storage disaggregato e inferenza AI in tempo reale, ilMCX631432AN-ADAB ConnectX-6 Lx SFP28 a doppia porta 25GbEL'adattatore offre un percorso maturo, ben documentato e ampiamente distribuito verso il successo di RDMA/RoCE. Gli architetti IT che cercano miglioramenti prestazionali ripetibili possono tranquillamente fare riferimento a questo caso quando pianificano le proprie iniziative di modernizzazione 25GbE.