Teknik Çözüm Kılavuzu: RDMA/RoCE Düşük Gecikme ve Verim Optimizasyonu için NVIDIA Mellanox MCX623106AN-CDAT

Modern veri merkezi mimarileri, uygulama iş yükleri için CPU verimliliğini korurken daha düşük gecikme süresi ve daha yüksek verim sunmak için sürekli bir baskı altındadır. Geleneksel TCP/IP ağları, doğal protokol ek yükü ile yüksek performanslı bilgi işlem (HPC), yapay zeka (AI) ve finansal hizmetlerin taleplerini karşılamakta sıklıkla yetersiz kalmaktadır. Bu teknik beyaz kitap, gecikmeyi önemli ölçüde azaltmak ve sunucu verimini artırmak için RDMA over Converged Ethernet (RoCE) uygulamasını merkezine alan kapsamlı bir çözümü İzleme Araçları: sunucu adaptörü etrafında sunmaktadır. Ağ mimarları, satış öncesi mühendisler ve operasyon yöneticileri hedeflenerek hazırlanan bu belge, bu gelişmiş teknolojiden yararlanmak için mimariyi, dağıtım stratejilerini ve operasyonel en iyi uygulamaları özetlemektedir.

1. Proje Arka Planı ve Gereksinim Analizi

Bu çözümün ele aldığı temel zorluk, çekirdek tabanlı ağ yığınlarının dayattığı "veri vergisi"dir. Yüksek frekanslı veri alışverişi gerektiren senaryolarda - dağıtılmış depolama, makine öğrenimi eğitimi veya gerçek zamanlı analizler gibi - CPU döngüleri paket işleme, sağlama toplamı hesaplamaları ve bağlam anahtarları için boşa harcanır. Modernleştirilmiş bir altyapı için temel gereksinimler şunları içerir:

• Ultra Düşük Gecikme Süresi: Uçtan uca uygulama gecikmesi en aza indirilmelidir, ideal olarak sunucular arası iletişim için 10 mikrosaniye altı aralığında.
• CPU Boşaltma: Ağ yapısı, işlemci çekirdeklerini hesaplama yoğun görevler için serbest bırakarak veri hareketini yönetmelidir.
• Ölçeklenebilirlik: Mimari, performans düşüşü olmadan onlardan binlerce düğüme kadar ölçeklenebilen düz, yüksek bant genişliğine sahip bir yapılandırmayı desteklemelidir.
• Standart Tabanlı: Çözüm, gelişmiş yetenekler sunarken yatırımı korumak için mevcut Ethernet altyapısından yararlanmalıdır.

yalnızca bir ağ arayüzü değildir; RDMA iletişiminin tüm yönlerini işleyen gelişmiş bir veri işleme birimi (DPU) öncüsüdür. Rolü çok yönlüdür: tasarruf edilen CPU döngüleri ve elde edilen performansla karşılaştırıldığında, yatırımın geri dönüşü caziptir. Satış için MCX623106AN-CDAT Ethernet adaptör kartı olarak, standart Ethernet ağları üzerinden RDMA'yı etkinleştirmek için özel olarak tasarlanmıştır.2. Genel Ağ Mimarisi Tasarımı

Önerilen mimari, kayıpsız bir RoCE ortamı için tasarlanmış bir leaf-spine yapısıdır. Temel ilkeler, yeterli aşırı abone oranlarına sahip engelsiz bir çekirdek ve tüm ağ cihazlarında Öncelik Akış Kontrolü (PFC) ve Açık Tıkanıklık Bildirimi (ECN) etkinleştirilmesini içerir. Tasarım, bilgi işlem, depolama ve yönetim trafiğini birleşik, yüksek hızlı bir Ethernet yapısına entegre eder.

Bu tasarımın kalbinde, her biri

MCX623106AN-CDAT ConnectX adaptör PCIe ağ kartı ile donatılmış sunucu düğümleri yer alır. Bu adaptör, iş yükü yoğunluğuna bağlı olarak 25GbE veya 100GbE bağlantıları aracılığıyla leaf anahtarlarına bağlanır. Spine katmanı, yapraklar arasında tam ağ bağlantısı sağlayarak herhangi bir yere düşük gecikme süresi yolları sağlar. NVMe-oF dizileri gibi depolama hedefleri de uyumlu adaptörler kullanılarak aynı yapıya bağlanır ve bilgi işlem düğümlerinden doğrudan bellek erişimi sağlar.3. Çözümde NVIDIA Mellanox MCX623106AN-CDAT'ın Rolü

MCX623106AN-CDAT

yalnızca bir ağ arayüzü değildir; RDMA iletişiminin tüm yönlerini işleyen gelişmiş bir veri işleme birimi (DPU) öncüsüdür. Rolü çok yönlüdür:İzleme Araçları: Adaptör donanımı, RDMA işlemlerini UDP/IP üzerinden kapsülleyen RoCEv2 protokolünü uygular. Bu, ana bilgisayar CPU'sunu dahil etmeden yönlendirilebilir, düşük gecikmeli iletişim sağlar.

• Taşıma Boşaltma: Bağlantı kurulumunu, paket sıralamasını ve güvenilir taşımayı yönetir, uygulamalara basit bir bellekten belleğe arayüz sunar.
• PCIe Gen4 Arayüzü: Yüksek bant genişliğine sahip PCIe 4.0 ana bilgisayar arayüzü ile adaptör, ağ verilerinin hat hızında sistem belleğine ve sistem belleğinden taşınabilmesini sağlayarak dahili darboğazları önler. Detaylı
• MCX623106AN-CDAT özellikleri yüksek hızlı bağlantıları tam olarak doyurma yeteneğini doğrular.4. Dağıtım ve Ölçeklendirme ÖnerileriBaşarılı bir dağıtım, hem ağ yapısının hem de uç ana bilgisayarların dikkatli bir şekilde yapılandırılmasını gerektirir. Aşamalı bir dağıtım için aşağıdaki adımlar önerilir:

Yapı Hazırlığı:

Sunucuları dağıtmadan önce, yoldaki tüm anahtarları kayıpsız RoCE için yapılandırın. Bu, RoCE trafik sınıfı için PFC (802.1Qbb) kurulumunu ve tıkanıklık yönetimi için ECN (802.1Qau) etkinleştirmeyi içerir.

• Sürücü ve Firmware Kurulumu: Tam özellik desteği için en son NVIDIA WinOF-2 veya MLNX_OFED sürücülerini yükleyin
• MCX623106AN-CDAT. Firmware'in İzleme Araçları: belirtilen sürümle eşleştiğini doğrulayın.Hizmet Kalitesi (QoS) Yapılandırması: Belirli uygulama profillerine göre gecikme ve CPU kullanımını dengelemek için kesme düzenlemesi ve birleştirme ayarları gibi parametreleri ayarlayın.
• Ölçeklenebilirlik Hususları: Yapı büyüdükçe, birden fazla yol boyunca düşük gecikme süresini korumak için "RoCE Uyarlanabilir Yönlendirme" gibi adaptörün gelişmiş özelliklerini kullanın. Tüm yeni düğümlerin mevcut anahtar altyapısıyla
• MCX623106AN-CDAT uyumlu olduğundan emin olun.5. Operasyonel İzleme, Sorun Giderme ve OptimizasyonBir RDMA yapısını sürdürmek özel araçlar ve uygulamalar gerektirir. NVIDIA,

MCX623106AN-CDAT

yönetimi ve izlenmesi için kapsamlı bir paket sunar.İzleme Araçları: Belirli uygulama profillerine göre gecikme ve CPU kullanımını dengelemek için kesme düzenlemesi ve birleştirme ayarları gibi parametreleri ayarlayın.

• Anahtar Metrikler: Yapıdaki tampon baskısını gösteren PFC duraklama çerçevelerini izleyin. Yüksek duraklama sayıları gecikme şişmesine yol açabilir ve tampon boyutlarının veya ECN eşiklerinin ayarlanmasını gerektirebilir.
• Firmware ve Sürücü Güncellemeleri: Adaptörün firmware'i için güncellemeleri düzenli olarak kontrol edin. Performans optimizasyonları ve yeni özellikler sıklıkla eklenerek bu
• MCX623106AN-CDAT Ethernet adaptör kartı çözümünün yetenekleri geliştirilir.Performans Ayarlama: Belirli uygulama profillerine göre gecikme ve CPU kullanımını dengelemek için kesme düzenlemesi ve birleştirme ayarları gibi parametreleri ayarlayın.
• 6. Özet ve Değer DeğerlendirmesiNVIDIA Mellanox MCX623106AN-CDAT

etrafında odaklanan teknik çözüm, RDMA/RoCE tabanlı düşük gecikmeli iletişim ve önemli sunucu verim artışları elde etmek için açık ve eyleme geçirilebilir bir yol sunar. Ağ işlemesini özel donanıma boşaltarak ve doğrudan bellek erişimini etkinleştirerek, kuruluşlar uygulamalarının tam potansiyelini ortaya çıkarabilir.

MCX623106AN-CDAT fiyatı tasarruf edilen CPU döngüleri ve elde edilen performansla karşılaştırıldığında, yatırımın geri dönüşü caziptir. Satış için MCX623106AN-CDAT arayan veya yeni bir dağıtım planlayan kuruluşlar için bu adaptör, yeni nesil, yüksek verimli veri merkezleri için kritik bir yapı taşı olarak öne çıkmaktadır.