NVIDIA Mellanox MCX653105A-HDAT Sunucu Adaptörü Teknik Çözüm: Maksimize edilmiş Sunucu için RDMA/RoCE Düşük Gecikme Taşıma

Modern veri merkezleri, büyük veri kümelerinden daha hızlı içgörüler sunmak için benzeri görülmemiş bir baskı altındadır. Yapay zeka eğitim kümelerini, gerçek zamanlı finansal analitikleri veya yüksek frekanslı ticaret platformlarını güçlendiriyor olsun, altta yatan ağ altyapısı genellikle birincil performans darboğazı haline gelir. Geleneksel TCP/IP tabanlı ağ oluşturma, çekirdek işleme ve veri kopyalama nedeniyle önemli CPU yükü getirir, bu da gecikmeyi artırır ve etkili verimi azaltır. CPU çekirdek sayısı ölçeklenirken ve NVMe depolama yaygınlaşırken, ağın ana işlemcileri zorlamadan doğrudan, yüksek hızlı veri hareketini desteklemek için evrimleşmesi gerekir.

Gereksinim açıktır: mimarlar, işletim sistemi çekirdeğini atlamak için Uzaktan Doğrudan Bellek Erişimi (RDMA) desteği sağlayan, sunucu belleği ile depolama veya diğer sunucular arasında doğrudan veri aktarımına olanak tanıyan bir ağ çözümü gerektirir. Birleştirilmiş Ethernet Üzerinden RDMA (RoCE), standart Ethernet altyapısında InfiniBand sınıfı gecikme sunarak önde gelen standart olarak ortaya çıkmıştır. 迈络思(NVIDIA Mellanox) MCX653105A-HDAT sunucu adaptörü, sunucu verimini en üst düzeye çıkaran ve uygulama gecikmesini en aza indiren yüksek performanslı, kayıpsız bir RoCE kumaşı için donanım temelini sağlayarak bu talepleri karşılamak üzere özel olarak üretilmiştir.

Önerilen mimari, RoCEv2 trafiğini desteklemek üzere tasarlanmış engelsiz, omurga-yaprak Ethernet kumaşı etrafında merkezlenir. Bu topoloji, öngörülebilir düşük gecikme ve yüksek bant genişliği ile her şeye-her-yer bağlantısı sağlar. Temel tasarım hususları şunları içerir:

• Kayıpsız Kumaş Yapılandırması: RoCE'yi etkinleştirmek için ağın kayıpsız olması gerekir. Bu, IEEE 802.1Qbb tarafından tanımlanan Öncelik Akış Kontrolü (PFC) aracılığıyla elde edilir; bu, tıkanıklık oluştuğunda düşük öncelikli akışları duraklatarak yüksek öncelikli RDMA trafiği için paket düşmelerini önler.
• Tıkanıklık Yönetimi: Açık Tıkanıklık Bildirimi (ECN), tıkanıklığı uç noktalara bildirmek için paketleri işaretler ve MCX653105A-HDAT adaptörlerinin arabellek taşması oluşmadan iletim hızlarını düşürmesine olanak tanır.
• Yaprak ve Omurga Tasarımı: Her sunucu 100GbE'de bir yaprak anahtara bağlanır. Yaprak anahtarlar daha sonra birden fazla omurga anahtarına bağlanarak tam kesitsel bant genişliği sağlar. Bu mimari, daha fazla raf eklendikçe doğrusal olarak ölçeklenir.
• Depolama ve Hesaplama Segmentleri: Kumaş, hem NVMe-oF depolama trafiğini hem de dağıtılmış uygulamalar için sunucular arası iletişimi destekler, hepsi aynı RoCE özellikli altyapıyı kullanır.

Bu mimari içinde, NVIDIA Mellanox MCX653105A-HDAT kritik uç nokta olarak hizmet eder ve sunucuların RDMA kumaşına tam olarak katılmasını sağlarken ağ görevlerini CPU'dan boşaltır.

MCX653105A-HDAT , NVIDIA Mellanox ConnectX-6 mimarisine dayanan çift portlu 100Gb/s adaptördür. Önerilen RDMA/RoCE çözümünün temelini oluşturur ve birkaç temel yetenek sunar:

• Donanım Tabanlı RoCE Boşaltma: Adaptör, paket kapsülleme, güvenilirlik ve tıkanıklık kontrolü dahil olmak üzere tüm RDMA taşıma işlevlerini donanımda işler. Bu, CPU çekirdeklerinin uygulama işleme için boş kalmasını sağlar ve doğrudan sunucu verimliliğini artırmaya katkıda bulunur.
• PCIe Gen3/Gen4 Desteği: En fazla PCIe 4.0 x16 desteği ile, MCX653105A-HDAT Ethernet adaptör kartı , hem portlarda eşzamanlı olarak hat hızında 100Gb/s'ye ulaşmak için yeterli ana bilgisayar bant genişliği sağlar, bu da zorlu NVMe-oF ve HPC iş yükleri için esastır.
• Gelişmiş Sanallaştırma: SR-IOV ve VirtIO hızlandırması, adaptörün sanallaştırılmış iş yüklerine neredeyse yerel performans sunmasını sağlar, bu da onu bulut ve NFV ortamları için uygun hale getirir.
• Programlanabilir Boru Hattı: Esnek ayrıştırıcı, donanım yükseltmeleri olmadan özel paket işleme ve yeni protokol boşaltmalarına olanak tanır, bu da yatırımı geleceğe hazırlar.

Resmi MCX653105A-HDAT spesifikasyonlarına göre, adaptör ayrıca donanım tabanlı satır içi şifreleme ve anahtar yönetimi desteği sunarak performans düşüşü olmadan güvenli RDMA sağlar. Bu, veri izolasyonu ve şifrelemenin zorunlu olduğu finansal hizmetler ve çok kiracılı bulut dağıtımları için özellikle kritiktir.

Riski en aza indirmek ve optimum performansı sağlamak için aşamalı bir dağıtım yaklaşımı önerilir:

• Aşama 1 – Pilot Küme: MCX653105A-HDAT ConnectX adaptör PCIe ağ kartı birimlerini küçük bir veritabanı ve depolama sunucusu kümesine dağıtın. PFC ve ECN'yi bu sunuculara bağlı portlarda etkinleştirmek için yaprak anahtarlarını yapılandırın. perftest gibi kıyaslama araçlarını kullanarak RDMA işlevselliğini doğrulayın.
• Aşama 2 – Depolama Ağı Entegrasyonu: Dağıtımı tüm depolama düğümlerine genişletin. NVMe-oF trafiğini RoCE kumaşına taşıyın. MCX653105A-HDAT uyumluluğu büyük depolama yazılımlarıyla sorunsuz bir geçiş sağlar.
• Aşama 3 – Tam Üretim Dağıtımı: MCX653105A-HDAT Ethernet adaptör kartı çözümünü tüm hesaplama düğümlerine dağıtın. Spark, TensorFlow ve bellek içi veritabanları gibi dağıtılmış uygulamalar için RDMA'yı etkinleştirin.

Ölçeklendirme için, omurga-yaprak kumaşının en yüksek trafiği işlemek üzere aşırı tahsis edildiğinden emin olun. Dağıtımınızdaki satılık MCX653105A-HDAT sayısı arttıkça, otomatik kumaş optimizasyonu ve sağlık izleme için NVIDIA'nın Birleşik Kumaş Yöneticisi'nden (UFM) yararlanın.

Yüksek performanslı bir RoCE kumaşını sürdürmek proaktif izleme ve ayarlama gerektirir:

• İzleme Araçları: Kumaş sağlığını izlemek, PFC duraklatma çerçevelerini izlemek ve tıkanıklık noktalarını tespit etmek için Mellanox NEO ve UFM'yi kullanın. MCX653105A-HDAT veri sayfası ethtool gibi standart araçlar aracılığıyla kullanılabilen ayrıntılı sayaç bilgileri sağlar.
• Performans Ayarı: İş yükü özelliklerine göre kesme birleştirme, halka arabellek boyutları ve PCIe parametrelerini ince ayarlayın. Adaptörün dinamik kesme moderasyonu (DIM) gibi gelişmiş özellikleri, trafik desenlerine göre otomatik olarak ayarlanabilir.
• Sorun Giderme: Yaygın sorunlar arasında yanlış yapılandırılmış QoS veya arabellek tükenmesi nedeniyle PFC fırtınaları bulunur. Tüm anahtarlar ve uç noktalar arasında tutarlı QoS yapılandırması sağlayın. MCX653105A-HDAT fiyatının performans açısından düzenli doğrulama testleriyle haklı çıkarıldığını doğrulayın.
• Firmware ve Sürücü Güncellemeleri: En son optimizasyonlardan ve hata düzeltmelerinden yararlanmak için adaptör firmware'ini ve NVIDIA sürücü yığınını güncel tutun. MCX653105A-HDAT Ethernet adaptör kartı sorunsuz güncellemeler için sahada yükseltilebilir firmware'i destekler.

NVIDIA Mellanox MCX653105A-HDAT sunucu adaptörü, düşük gecikme ve yüksek verim gerektiren modern veri merkezi mimarileri için sağlam, yüksek performanslı bir temel sağlar. Donanım tabanlı RDMA/RoCE'yi etkinleştirerek, CPU yükü darboğazını doğrudan ele alır ve gelir getiren uygulamalar için hesaplama kaynaklarını serbest bırakır. Burada ayrıntılı olarak açıklanan çözüm, yapay zeka eğitiminden gerçek zamanlı finansal analitiklere kadar en zorlu iş yüklerini destekleyebilen ölçeklenebilir, kayıpsız bir Ethernet kumaşına net bir yol sunar. Geleceğe dönük bir ağ altyapısı arayan mimarlar için, MCX653105A-HDAT hem anında performans artışı hem de uzun vadeli değer sunan kritik bir yapı taşıdır.