Mellanox (NVIDIA Mellanox) MFS1S00-H005V AOC Aktif Optik Kablo Uygulama Uygulaması

Mellanox (NVIDIA Mellanox) MFS1S00-H005V AOC Aktif Optik Kablo Uygulama UygulamalarıKısım mesafeli Yüksek Hızlı Inter-Rack Bağlantısı ve Kablolama Basitleştirme

Arka plan ve zorluklar: Raflar arası bağlantıdaki kablolama sıkıntılı yeri

Ulusal bir süper hesaplama merkezi, InfiniBand HDR 200G ağını “raklar arasındaki fiziksel bağlantıyı” yükselttikten sonra beklenmedik bir engelle karşılaştı.her biri 16 GPU sunucusu içerirGeleneksel yaklaşımla, raflar arası bağlantı, fiber patch kabloları ve ayrı optik modüllere dayanıyordu:QSFP56 SR4 alıcıları her rafın tepesinde yerleştirildi., MPO fiber jumpers aracılığıyla bitişik raflardaki Leaf anahtarlarına bağlandı. Bu çözüm ilk dağıtım sırasında birden fazla sorunu ortaya çıkardı.Kablo artışı şiddetliydi. 48 raf arasında 300'den fazla fiber bağlantısı gerekiyordu.İkincisi, optik modüllerin arıza oranı özellikle yüksekti.Operasyon ekibi, görevden sonraki ilk üç ay boyunca haftada ortalama 3 ila 4 modül değişikliğini kaydetti.Üçüncüsü, her bir MPO sıçrayıcısı titiz bir kutup yönetimi ve temizlik gerektiriyordu.İlk çıkış sırasında bağlantı başına 15-20 dakika eklemekOperasyon yöneticisi, zorluğu şöyle özetledi: "Aynı 200G performansını sağlayabilecek ancak daha az bileşen, daha basit bir işleme sahip,ve alan arıza oranlarını önemli ölçüde düşürdü.. "

Çözüm ve Uygulama: MFS1S00-H005V Aktif Optik Kabloyu Tanıtmak

Bu ağrı noktalarını ele almak için, merkez çeşitli alternatifleri değerlendirdi ve nihayetindeMFS1S00-H005VMellanox'tan (NVIDIA Mellanox)MFS1S00-H005V 200G QSFP56 AOC kablooptik alıcıları ve fiberleri tek, önceden bitirilmiş bir montaj içine entegre eden.MFS1S00-H005V InfiniBand HDR 200Gb/s aktif optik kablo, ayrı modüller ve sıçrayıcılara gerek kalmaz.50 metreye kadar uzanan bir plug-and-play bağlantısı sunuyor ideal bu tesisin rafları arasındaki tipik 5 ila 15 metrelik mesafeler için.

Uygulama stratejisi üç hafta sonu boyunca aşamalı olarak uygulandı. 1. aşamada ekip, çekirdek omurilik katmanındaki tüm yaprak-yağı bağlantılarınıNVIDIA Mellanox MFS1S00-H005V,MFS1S00-H005V uyumluİkinci aşama, her hesaplama düğümünü Leaf anahtarlarına bağlayarak AOC dağıtımını rafın üstündeki yukarı bağlantılara genişletti.3. aşama, GPU'dan depolama dokusuna odaklandı, neredeMFS1S00-H005V 200G QSFP56 AOC kablo çözümüEkip paralel dosya sistemi trafiği için belirleyici gecikme sağladı.MFS1S00-H005V veri sayfasıBağlantı bütçelerini doğrulamak ve 50 metrelik erişimin en uzun süreleri için (servis döngüleri dahil olmak üzere 37 metre olarak ölçülen) yeterli olmasını sağlamak.

AOC yaklaşımının önemli bir avantajı, ayrı alıcı temizleme aşamasının ortadan kaldırılmasıydı.MFS1S00-H005Vfabrikada test edilmiş ve mühürlenmiş olarak geldi, montajdan önce sadece bağlantı uçlarının görsel incelemesi gerekmektedir.Ekip, yaprak ile omurga arasındaki bağlantıları yaprakla bilgisayar arasındaki bağlantılardan ayırt etmek için renk kodlu kablo ayakkabıları kullandı., belgeleri daha da basitleştirmek.

Sonuçlar ve faydalar: Güvenilirlik ve operasyonel verimlilikte somut gelişmeler

Gönderim sonrası ölçümler, birçok boyutta önemli kazanımlar gösterdi.MFS1S00-H005V özellikleri✓ her bir uç için tipik güç tüketimi 1.5W'den daha düşük ve 1e-15'ten daha düşük bir BER dahil olmak üzere üretim ortamında tam olarak gerçekleştirildi,Merkez, kesimden sonraki iki ay içinde bağlantı ile ilgili sıfır iş başarısızlığı rapor ediyor.Aşağıdaki tablo temel iyileştirmeleri özetliyor:

Operasyon ekibi ayrıca,MFS1S00-H005VKabloların esnek kablosu ve 30 mm minimum bükme yarıçapı, kablo tepsilerinin içindeki çok daha düzgün yönlendirmeyi sağladı, kablo bağlama ihtiyacı azalttı ve hava akışını iyileştirdi.Merkezi,MFS1S00-H005V fiyatıBirim başına, bağlantı başına ayrı modül artı sıçrama kombinasyonundan biraz daha fazlaydı, yedek parça stoklarının ortadan kaldırılması, arıza giderme işinin azaltılması,ve sıfıra yakın arıza oranı, sahip olma toplam maliyetini (TCO) daha uygun hale getirdi.Satılık MFS1S00-H005VNVIDIA'nın kanalı aracılığıyla herhangi bir arızalı ünitenin hızlı bir şekilde değiştirilmesini de sağladı (ancak ilk üç ayda hiçbiri meydana gelmedi).

Özet ve Görünüm: Basitleştirilmiş HDR Kumaşları için Bir Plan

Süperbilgisayar merkezinin başarılı bir şekildeMFS1S00-H005VAktif optik kabloların HDR 200G ortamlarında raflar arası bağlantıyı nasıl önemli ölçüde kolaylaştırabileceğini gösteriyor.AOC yaklaşımı bileşen sayısını azaltır, modülle ilgili alan hatalarını ortadan kaldırır ve dağıtım süresini %80'den fazla azaltır.NVIDIA Mellanox MFS1S00-H005VDaha yüksek güvenilirlik ve daha düşük operasyonel genel masraflar için kanıtlanmış bir yol sunar.MFS1S00-H005V veri sayfasıMerkez şimdi AOC stratejisini yeni GPU genişletme kanadına genişletmeyi planlıyor.Aynı faydaları daha büyük ölçekte tekrarlamayı bekliyorlar.