NVIDIA Mellanox MCX631432AN-ADAB Server Adapter dalam Aksi ♫ RDMA / RoCE Low-Latency Transport & Server Throughput Gains

NVIDIA Mellanox MCX631432AN-ADAB Server Adapter dalam Aksi ♫ RDMA / RoCE Low-Latency Transport & Server Throughput Gains

Latensi dan Tantangan: Hambatan Latensi dalam Penyimpanan Terdistribusi

Tim infrastruktur di sebuah perusahaan internet besar baru-baru ini menghadapi tantangan yang akrab: Cluster penyimpanan terdistribusi mereka, dibangun di Ceph backend,berjuang untuk mengikuti permintaan aplikasi yang meningkatSementara node penyimpanan dilengkapi dengan CPU yang kuat dan drive NVMe yang cepat, latensi jaringan telah menjadi hambatan utama terutama selama operasi I / O puncak.Adaptor 10GbE yang ada tidak memiliki kemampuan hardware offload, menyebabkan intervensi CPU yang berlebihan untuk setiap paket yang diproses.

Overhead ini paling jelas pada beban kerja yang intensif menulis, di mana setiap operasi I / O membutuhkan beberapa perjalanan pulang jaringan.Tim membutuhkan solusi yang dapat secara drastis mengurangi latensi ekor sambil meningkatkan keseluruhan server throughputSetelah mengevaluasi beberapa pilihan, mereka beralih keNVIDIA Mellanox MCX631432AN-ADABAdaptor 25GbE SFP28 dual-port khusus dibangun untuk RDMA melalui penyebaran Ethernet Converged (RoCE).

Solusi & Deployment: Deploying RoCE dengan ConnectX-6 Lx

Penyebaran ini menargetkan tiga node penyimpanan yang berfungsi sebagai server metadata di dalam cluster Ceph, di mana sensitivitas latensi tertinggi.MCX631432AN-ADAB ConnectX-6 Lx dual-port 25GbE SFP28Adaptor, menghubungkan ke 25GbE atas-of-rack switch dengan dukungan RoCEv2. tim dikonfigurasi kedua port dalam mode aktif-aktif ikatan,mengakumulasi hingga 50Gb/s dari total bandwidth sambil menyediakan redundansi failover.

Aspek penting dari implementasi adalah memungkinkan RoCEv2 dengan Prioritas Flow Control (PFC) dan Eksplisit Congestion Notification (ECN) untuk memastikan perilaku jaringan tanpa kerugian.Kartu adaptor Ethernet MCX631432AN-ADABsecara native mendukung mekanisme manajemen kemacetan canggih ini, menghilangkan kebutuhan untuk switch eksklusif atau lisensi tambahan.Tim ini juga memanfaatkan hardware built-in adaptor timestamps dan telemetry counter untuk memantau kesehatan kain secara real time selama fase pembakaran awal.

MenurutLembar data MCX631432AN-ADAB, adaptor mendukung PCIe Gen 4.0 x8, yang terbukti penting untuk sepenuhnya jenuh port 25GbE ganda tanpa bottlenecking bus host.membuat upgrade mudahUntuk lingkungan masih pada PCIe Gen 3.0, adaptor tetap penuhMCX631432AN-ADAB kompatibeldengan kompatibilitas kebelakang fleksibilitas yang menyederhanakan rencana peluncuran bertahap.

Proses penyebaran secara signifikan disederhanakan. Dengan tumpukan driver jaringan NVIDIA, adaptor segera dikenali di seluruh lingkungan CentOS 8.Spesifikasi MCX631432AN-ADABuntuk menyempurnakan alokasi buffer dan mengganggu pengaturan coalescing, menyesuaikan perilaku adaptor dengan pola beban kerja spesifik mereka.

Hasil & Manfaat yang Dapat Diukur

Peningkatan kinerja langsung dan dapat diukur.Tabel di bawah ini membandingkan metrik utama sebelum dan setelah penerapanNVIDIA Mellanox MCX631432AN-ADAB:

Di luar angka, tim mengamati peningkatan konsistensi dalam waktu respons I / O, menghilangkan efek "tetangga bising" yang sebelumnya mempengaruhi aplikasi penyewa yang berbagi backend penyimpanan.Hardware offloads yang disediakan olehSolusi kartu adaptor Ethernet MCX631432AN-ADABmengurangi overhead CPU secara signifikan sehingga node dapat menangani sekitar 60% lebih banyak IOPS sebelum mencapai kejenuhan CPU, secara efektif menunda siklus pembaruan perangkat keras yang direncanakan.

Untuk tim operasi jaringan, telemetri adaptor yang dibangun di dalam dan kemampuan untuk mengakses perhitungan kinerja real-time melaluiSpesifikasi MCX631432AN-ADABTim dapat mengidentifikasi micro-burst dan masalah kedalaman antrian sebelum mereka mempengaruhi beban kerja produksi.

Ringkasan & Prospek: Dasar untuk Skala Masa Depan

Penyebaran ini memvalidasi bahwaNVIDIA Mellanox MCX631432AN-ADABtidak hanya peningkatan tambahan tetapi komponen transformatif untuk latensi-sensitif sistem terdistribusi. Dengan membuka potensi penuh RoCE,Adaptor memberikan pengurangan substansial di kedua rata-rata dan ekor latensi sementara secara bersamaan meningkatkan agregat server throughput oleh hampir 6xSiklus CPU yang dilepaskan sekarang dialokasikan kembali ke pemrosesan tingkat aplikasi, meningkatkan efisiensi keseluruhan cluster.

Melihat ke depan, tim sedang mengeksplorasi kasus penggunaan tambahan untuk adaptor,termasuk NVMe over Fabrics (NVMe-oF) untuk penyimpanan blok berkinerja tinggi dan berpotensi GPUDirect untuk beban kerja pelatihan AI. Fleksibilitas arsitektur ConnectX-6 Lx memastikan bahwaMCX631432AN-ADABUntuk organisasi yang mengevaluasi jalur upgrade yang sama,Harga MCX631432AN-ADAB, bila diimbangi dengan penghematan operasional dan peningkatan kinerja, menyajikan kasus bisnis yang menarik.

Pengalaman tim ini menggarisbawahi tren yang lebih luas: karena pusat data semakin mengadopsi 25GbE dan kain yang lebih tinggi, pilihan adaptor server menjadi keputusan arsitektur yang kritis.Kartu adaptor Ethernet MCX631432AN-ADABmenawarkan solusi yang terbukti dan siap untuk produksi bagi mereka yang ingin menjembatani kesenjangan antara infrastruktur yang ada dan tuntutan kinerja generasi berikutnya.