NVIDIA Mellanox MMA4Z00-NS Veri Merkezi Optik Alıcı Teknik Çözüm

NVIDIA Mellanox MMA4Z00-NS Veri Merkezi Optik Alıcı-Verici Teknik Çözümü | Raftan Rafa ve Tesisler Arası Bağlantılarda Bant Genişliğini ve Mesafeyi Dengeleme

1. Proje Arka Planı ve Gereksinim Analizi

Yapay zeka (AI) ve yüksek performanslı bilgi işlem (HPC) iş yükleri ölçeklenmeye devam ettikçe, temel ağ altyapısının 800G Ethernet ve 400G InfiniBand erişim hızlarını destekleyecek şekilde gelişmesi gerekiyor. Veri merkezi mimarları artık kritik bir fiziksel katman tasarımı sorunuyla karşı karşıya: alıcı-verici türlerini çoğaltmadan, envanter maliyetlerini şişirmeden veya sinyal bütünlüğünden ödün vermeden, raf içi bağlantılardan (2-5 metre) koridorlar arası bağlantılara (30-60 metre) ve hatta sıralar arası veya binalar arası bağlantılara (100 metreye kadar) kadar değişen mesafelerde 800G bant genişliğinin nasıl sağlanacağı. Her bir mesafe katmanı için ayrı optik modüllerin seçilmesine yönelik geleneksel yaklaşım (örneğin, kısa erişim için SR8, genişletilmiş erişim için DR8/FR8), operasyonel karmaşıklığa neden olur ve kısa erişimli bir modülün yanlışlıkla daha uzun bir bağlantıya yerleştirildiği ve öngörülemeyen bit hatası oranlarına (BER) neden olduğu yanlış provizyon riskini artırır.

Bu zorluk, eşzamanlı üç endüstri eğilimiyle daha da artıyor. İlk olarak, hem Ethernet hem de InfiniBand anahtarlarında OSFP (Sekizli Küçük Form Faktörü Takılabilir) form faktörünün yaygın olarak benimsenmesi, ortak bir arayüz oluşturdu ancak tüm OSFP alıcı-vericileri, 800G PAM4 hızlarında çok modlu fiber üzerinden tutarlı performans sunmuyor. İkincisi, sürdürülebilirlik talimatları, port başına güç tüketiminde azalmaya yol açıyor çünkü 32 veya 64 OSFP bağlantı noktasına sahip yüksek yoğunluklu anahtarlar, alıcı-vericiler optimize edilmezse önemli miktarda güç tüketebilir. Üçüncüsü, operasyonel ekiplerin izlemeyi basitleştirmek ve ortalama onarım süresini (MTTR) azaltmak için tüm optik bağlantılarda tek tip teşhis yeteneklerine ihtiyacı vardır. Yapılandırılmış bir teknik çözüm gereklidir; iyi tanımlanmış tek bir 800G SR8 alıcı-verici üzerinde standartlaşan, aynı zamanda hem Ethernet hem de InfiniBand yapılarında mesafe planlaması, bağlantı bütçesi doğrulaması ve proaktif sağlık yönetimi için net yönergeler sağlayan bir çözüm.

2. Genel Ağ / Sistem Mimarisi Tasarımı

Önerilen mimari, GPU hesaplama düğümleri ve depolama sistemleri için birincil erişim arayüzü olarak hizmet veren 800G OSFP bağlantı noktalarına sahip iki katmanlı bir omurga yaprak topolojisini benimsiyor. Tipik olarak 32 veya 64 OSFP bağlantı noktasıyla donatılmış her yaprak anahtarı, 800G veya 1,6T yukarı bağlantılar yoluyla yukarı akış omurga anahtarlarına bağlanırken aşağı akış bağlantı noktaları, birden fazla raf ve koridor boyunca dağıtılan bilgi işlem düğümlerine ve depolama denetleyicilerine tahsis edilir. Bağlantı noktası kullanımını en üst düzeye çıkarmak ve anahtar kaplama alanını azaltmak için mimari, 2×400G ara yapılandırmalarından yararlanır: tek bir 800G OSFP bağlantı noktası, her biri ayrı bir GPU sunucusunda veya depolama uç noktasında sonlanan iki bağımsız 400G bağlantıya bölünür. Bu tasarım, yaprak katmanının etkili bağlantı noktası yoğunluğunu etkili bir şekilde iki katına çıkarır; bu, özellikle raf alanının önemli olduğu GPU açısından zengin ortamlarda değerlidir.

Anahtarlar ve uç noktalar arasındaki fiziksel kablolama,NVIDIA Mellanox MMA4Z00-NS65 metreye kadar tüm çok modlu fiber bağlantılar için standartlaştırılmış 800G optik alıcı-verici olarak. BuMMA4Z00-NS 800G OSFP SR8 alıcı-vericiOM4 (50 metre) ve OM5 (70 metre) çok modlu fiber üzerinden, şerit başına 100G PAM4 hızında 8 paralel şerit kullanarak çalışır ve 800GBASE-SR8 ve 400G-SR4 Ethernet özelliklerinin yanı sıra InfiniBand HDR ve NDR veri hızlarıyla da uyumludur. Modülün çift protokol özelliği (aynı yazılımın yeniden yapılandırılması gerekmeden hem Ethernet'i hem de InfiniBand'ı destekler), heterojen yapılarda birleşik bir optik strateji sağlar ve karma protokollü ortamlarda gereken alıcı-verici SKU'larının sayısını azaltır.

Mimari ayrıca tüm yeni kurulumlar için MPO-12 konektörleri ve OM5 geniş bant çok modlu fiber kullanan standartlaştırılmış bir fiber tesisi tasarımını da içeriyor ve bağlantı marjının izin verdiği durumlarda daha kısa bağlantılar için mevcut OM4 altyapısının yeniden kullanılmasına yönelik hükümler içeriyor. Bu tasarım, herhangi bir OSFP bağlantı noktasının 65 metrelik erişim sınırı dahilindeki herhangi bir uç noktaya çapraz bağlanabilmesini sağlayarak kapasite yeniden dengeleme ve donanım yenileme döngüleri için maksimum esneklik sağlar. Tasarım kılavuzunda şunlara atıfta bulunulmaktadır:MMA4Z00-NS teknik özellikleribükülme yarıçapı (minimum 30 mm dinamik), konektör temizliği (IEC 61300-3-35'e göre) ve ekleme kaybı bütçeleri (konektörler ve eklemeler dahil olmak üzere tüm bağlantı için toplam maksimum 3,0 dB).

3. NVIDIA Mellanox MMA4Z00-NS'nin Çözümdeki Rolü ve Temel Özellikleri

Bu mimari içerisindeMMA4Z00-NS 800G OSFP SR8 alıcı-vericianahtarın/adaptörün elektrik alanı ile fiber optik altyapı arasında köprü oluşturan standartlaştırılmış optik arayüz olarak işlev görür. Temel teknik özellikleri, tek SKU stratejisinin başarısı açısından kritik öneme sahiptir:

• Çift protokollü çalışma:Otomatik algılamayla hem 800G Ethernet'i (800GBASE-SR8) hem de 400G InfiniBand'ı (NDR) destekler ve heterojen yapılarda birleşik bir alıcı-verici envanteri sağlar.
• Yerel 2×400G koparma kapasitesi:MMA4Z00-NS 2x400G InfiniBand/Ethernetmodu, tek bir OSFP bağlantı noktasının, bir ara MPO-12 - 2×MPO-8 kablo düzeneği kullanarak iki bağımsız 400G uç noktasını beslemesine olanak tanır ve harici çıkış modüllerine olan ihtiyacı ortadan kaldırır.
• 8 şeritli 850nm VCSEL dizisi:Düşük bağıl yoğunluk gürültüsü (RIN) ile güvenilir optik çıkış gücü (şerit başına tipik -2,0 ila +4,0 dBm) sağlar ve 100G PAM4'te çok modlu fiber üzerinden temiz göz diyagramlarını destekler.
• Yüksek hassasiyetli PIN alıcı dizisi:Şerit başına -5,5 dBm'lik tipik hassasiyet, 70 metrede OM5'te en az 3,0 dB'lik bir bağlantı marjı sağlayarak konnektör kayıplarını ve eskimeyi hesaba katar.
• Güç verimliliği:800G modunda 10,5W'ın altında ve 2×400G ara modunda yaklaşık 8,2W'ın altındaki tipik tüketim, termal bütçeleri aşmadan yoğun bağlantı noktası yapılandırmalarına olanak tanır.
• Entegre dijital teşhis izleme (DDM):Standart I²C yönetim arayüzü aracılığıyla her şerit için Tx gücü, Rx gücü, sıcaklık, voltaj ve öngerilim akımının gerçek zamanlı raporlanması, proaktif hata tespitine ve şerit düzeyinde sorun gidermeye olanak tanır.
• Geniş çalışma sıcaklığı aralığı:0°C ila 70°C kasa sıcaklığı, yüksek ortam sıcaklığına sahip yüksek yoğunluklu raf ortamlarında güvenilir çalışma sağlar.

Bu özellikler kapsamlı bir şekilde belgelenmiştir.MMA4Z00-NS veri sayfasıKabin yerleşim araçlarına entegrasyon için göz diyagramı maskeleri, titreşim tolerans eğrileri ve mekanik çizimler içerir. Veri sayfası ayrıca, her bir bağlantının toplam ekleme kaybının modülün optik bütçesi dahilinde kaldığını doğrulamak için mimari planlama aşamasında referans verilen ayrıntılı bağlantı bütçesi tablolarını da sağlar.

4. Dağıtım ve Ölçeklendirme Önerileri (Tipik Topoloji Açıklamasıyla)

İlk dağıtım için mesafe katmanlarını standart kablolama türleriyle eşleyen ve tüm bağlantılarda tutarlı bağlantı marjı sağlayan yapısal bir bölgeleme yaklaşımı öneriyoruz. Aşağıdaki tipik topoloji, kabinler arası mesafeleri 5 ila 50 metre arasında değişen, sekiz kabinde (kabin başına 8 düğüm) 64 GPU düğümüne hizmet veren 32 bağlantı noktalı yaprak anahtar için kullanılır:

• Bölge A (Raf içi, 2–5 metre):MPO-12 yama kablolarını yaprak anahtardan (aynı kabinde) GPU düğümlerine yönlendirin. Bağlantı marjı 6 dB'yi aşarak orta düzeyde konnektör bozulmasında bile sağlam çalışma sağlar.
• Bölge B (Bitişik dolaplar, 8–20 metre):Ara yama panellerine sahip havai fiber tepsiler aracılığıyla yapılandırılmış OM5 kablolaması. Toplam bağlayıcı sayısı: Bağlantı başına 2 bağlı çift. Bağlantı marjı: 4,0–4,5 dB, modülün minimum 3,0 dB sınırı dahilinde.
• Bölge C (Koridor arası / sıralar arası, 25–50 metre):Fabrikada parlatılmış konektörlere sahip, yükseltilmiş zeminlerin altından yönlendirilen, önceden sonlandırılmış OM5 devreleri. Bağlantı marjı: 3,0–3,5 dB, 5 yıl boyunca 0,5 dB'ye kadar eskimeye rağmen hala rahat.
• Bölge D (Binalar arası kampüs, 50–65 metre):Yalnızca OM5 altyapısının mevcut olduğu kısa kampüs bağlantıları için kullanılır. 65 metredeki bağlantı marjı yaklaşık 3,0 dB'dir ve devreye alma sırasında titiz konnektör temizliği, bükülme yarıçapı uyumluluğu ve güç marjı doğrulaması gerektirir.

Tek bir bölmenin ötesinde ölçeklendirme, birden fazla bölmeden 800G erişim bağlantılarını sonlandıran ara toplama anahtarlarının eklenmesiyle aynı bölgeleme ilkelerini takip eder. ÇünküMMA4Z00-NS 800G OSFP SR8 alıcı-verici çözümüÇift protokol özelliğine sahip tek bir SKU kullanır; genişletme, protokol veya mesafe başına alıcı-verici türlerinin tahmin edilmesini gerektirmez; tüm bağlantılar aynı şekilde sağlanır. Bu, lojistiği basitleştirir ve bakım etkinlikleri sırasında hızlı değişim için operasyon ekibinin küçük bir yedek alıcı-verici stoku (genellikle konuşlandırılan birimlerin %5'i) tutmasına olanak tanır.

Mesafe planlaması için aşağıdaki tablo, fiber türüne ve bağlantı bütçesine dayalı olarak maksimum erişime yönelik yönergeler sağlar:

Maksimum erişime yaklaşan mesafelerde dağıtım yaparken, devreye alma sırasında bir ışık kaynağı ve güç ölçer kullanarak optik güç ölçümü yapılmasını ve ölçülen kaybın hesaplanan bütçeyle karşılaştırılmasını öneririz.MMA4Z00-NS veri sayfası. Bu doğrulama adımı, bağlantı üretime alınmadan önce herhangi bir kablo kusurunun veya kirliliğin tespit edilmesini sağlar.

5. İşletme ve Bakım: İzleme, Sorun Giderme ve Optimizasyon

MMA4Z00-NS tabanlı optik altyapının operasyonel yaşam döngüsü, modülün şerit düzeyinde DDM yeteneklerinden yararlanarak izleme ve hata yönetimine yönelik sistematik bir yaklaşım gerektirir. OSFP modülleri için standart CMIS (Ortak Yönetim Arayüzü Belirtimi) kullanılarak I²C yönetim arabiriminin merkezi ağ yönetim sistemine (NMS) entegre edilmesini öneririz. Proaktif uyarılar için yapılandırılacak temel eşikler şunları içerir:

• Tx güç kaybı:Herhangi bir şeritteki çıkış gücü nominal değerden 2,0 dB'den fazla düşerse uyarı verir; bu, iletim tarafında olası VCSEL eskimesini veya konnektör kirlenmesini gösterir.
• Rx güç marjı:Herhangi bir şeritte alınan gücün -5,0 dBm'ye yaklaşması (-5,5 dBm'de hassasiyetle) durumunda uyarı verir; bu aşırı bağlantı kaybı, kablo hasarı veya hatalı MPO konnektör hizalaması anlamına gelir.
• Sıcaklık gezileri:Kasa sıcaklığı 65°C'yi aşarsa uyarı verin; bu durum hava akışı tıkanıklığı, fan arızası veya ortam sıcaklığının arttığını gösterir.
• Önyargı akımı kayması:Zaman içinde lazer önyargı akımındaki değişiklikleri izleyin; herhangi bir şeritte nominalin %30'unu aşan sürekli bir artış VCSEL bozulmasına işaret edebilir.

Bağlantının bozulması veya arızalanması durumunda yapılandırılmış bir sorun giderme protokolü izlenmelidir:

1. 8 şeritten hangisinde bozulma yaşandığını tespit etmek için şerit düzeyinde DDM okumalarını doğrulayın; Tx ve Rx değerlerini beklenen aralıklarla karşılaştırınMMA4Z00-NS teknik özellikleri.
2. Bir uç yüz mikroskobu kullanarak her iki uçtaki MPO konektörlerini inceleyin; IEC 61300-3-35 standartlarına göre kirlenme tespit edilirse, etkilenen herhangi bir şeride özellikle dikkat ederek temizleyin.
3. Arızanın modülde mi yoksa fiber tesiste mi olduğunu doğrulamak için bağlantıyı çalıştığı bilinen bir MMA4Z00-NS alıcı-vericiyle test edin.
4. Sorun belirli bir şeritte devam ederse, bir OTDR testi gerçekleştirin veya arızayı fiber yolunda veya alıcı-vericinin dahili optik yolunda yalıtmak için bir geridöngü tanılaması kullanın.

Optimizasyon fırsatları arasında, minimum bükülme yarıçapı uyumluluğunu sağlamak ve MPO konektörü gerilim azaltımından ödün verilmediğini doğrulamak için periyodik kablo yönetimi denetimleri yer alır. Ek olarak, çünküMMA4Z00-NS fiyatıdiğer nitelikli 800G SR8 modülleriyle rekabet edebildiğinden, hızlı değiştirmeyi mümkün kılmak ve MTTR'yi en aza indirmek için küçük bir yedek alıcı-verici stoğu (toplam kurulu birimlerin yaklaşık %5'i) bulundurmanızı öneririz. Büyük ölçekli dağıtımlar için, tüm bağlantılarda şerit düzeyinde DDM verilerini toplayan, tahmine dayalı bakım ve kapasite planlamasına olanak tanıyan otomatik optik sistem durumu kontrol panellerini uygulamayı düşünün.

6. Özet ve Değer Değerlendirmesi

NVIDIA Mellanox MMA4Z00-NStabanlı teknik çözüm, 800G veri merkezi erişim ağlarında bant genişliğini ve mesafeyi dengelemek için pragmatik, sahada doğrulanmış bir metodoloji sağlar. Tek bir IEEE uyumlu OSFP SR8 alıcı-vericisinde standartlaştırılarak —MMA4Z00-NS 800G OSFP SR8 alıcı-verici— mimari, farklı mesafe katmanları ve protokoller için birden fazla SKU'yu yönetme karmaşıklığını ortadan kaldırır, yedek parça envanterini azaltır ve dağıtım planlamasını basitleştirir. Modülün 850nm VCSEL teknolojisi, yüksek hassasiyetli PIN alıcı dizisiyle birleştiğinde, hem Ethernet hem de InfiniBand yapılarını desteklerken veri merkezi içi bağlantıların büyük çoğunluğunu kapsayan OM4 ve OM5 çok modlu fiber üzerinden 70 metreye kadar güvenilir performans sunar.

Karşılaştırılabilir dağıtımlardan elde edilen anahtar değer ölçümleri şunları içerir:

• Envanter azaltma:Tek bir alıcı-verici SKU'su, mesafeye/protokole özgü dört parça numarasının (örneğin, SR8, SR4, DR8, FR8) yerini alarak lojistik masraflarını %60-70 oranında azaltır.
• Güç verimliliği:800G modunda < 10,5 W ve 2×400G ara modunda < 8,2 W ile MMA4Z00-NS, soğutma maliyetlerinin düşürülmesine ve PUE'nin iyileştirilmesine katkıda bulunur.
• Operasyonel güvenilirlik:Şerit düzeyinde DDM özellikli proaktif izleme, optik katman hataları için MTTR'yi %60'a kadar azaltır.
• Maliyet optimizasyonu:MMA4Z00-NS fiyatıdiğer nitelikli 800G SR8 modülleriyle rekabet edebilir; çift protokol özelliği ve yerel koparma desteği ise ek yeterlilik maliyetlerini ve harici donanımı ortadan kaldırır.

Ağ mimarları ve mühendislik liderleri için MMA4Z00-NS, sıcaklık değişimleri ve mekanik gerilimler karşısında tutarlı performansı koruyan bir "ayarla ve unut" optik arayüzü sunar. Çözüm özellikle standartlaştırılmış 800G erişim ağlarını planlayan yeşil alan yapay zeka veri merkezleri ve mevcut çok modlu fiber altyapısını yeniden kullanırken 400G'den 800G'ye yükseltme yapan kahverengi alan ortamları için önerilir. 800G Ethernet ve 400G InfiniBand yapay zeka, HPC ve kurumsal depolama ortamlarında ilgi görmeye devam ederken, MMA4Z00-NS tabanlı optik mimari hem mevcut operasyonel kısıtlamalara hem de uzun vadeli kapasite yol haritalarına uygun sağlam, ölçeklenebilir bir temel sağlıyor.

Ayrıntılı entegrasyon yönergeleri, termal simülasyon verileri ve uyumluluk sertifika paketleri için lütfen resmi ürün belgelerine bakın.