Mellanox MT27800 Ailesi ConnectX-5 bağlantısı Değiştirildikten Sonra Kapalı

Summary: Dell Parça Numarası (DPN) 6FKDT Bağlantı kapalı durumdayken hatalı ağ kartı değişimi bulundu ancak TSR veya SupportAssist günlüğünde herhangi bir hata gösterilmiyor.

This article applies to This article does not apply to This article is not tied to any specific product. Not all product versions are identified in this article.
Check out other resources

Symptoms

Sorun arka planı: 

  • Mellanox ConnectX-5, Aygıt Ayarı altında algılanmıyor 
  • Ağ kartını değiştirdikten sonra, Aygıt Ayarları altında Mellanox ConnectX-5 i algılayabilir ancak bağlantı kapalı veya yoklama yapılıyor

Sağlanan donanım bilgileri:

  • İki sunucu aynı, ancak yalnızca bir birim bu sorunla karşılaşıyor 
  • Her iki sunucu da CentOS 7.5 işletim sistemine sahiptir
  • DAC-QSFP28-100G-5.0M (DPN 0FN4FC) 
  • Mellanox Sürücü sürümü 4.5-1.0.1
  • Kullanıcı, çalıştığı onaylanan DAC kablolarını ve anahtar bağlantı noktalarını çapraz değiştirir 
  • DPN 6FKDT, kart bilgilerini alamayan yönetilmeyen bağdaştırıcıların parçası olan bir InfiniBand kartıdır. 
Example: 
Kart bellenimi, kart ayarı ve bağlantı durumu için aşağıdaki örneğe bakın:


Kart bellenim düzeyi, kart ayarı ve bağlantı durumu örneğiŞekil 1: Kart bellenim düzeyi, kart ayarı ve bağlantı durumu örneği

İşletim sistemi düzeyinde bilgiler sağlanır:
  • ibstat komut - InfiniBand aygıtının temel durumunu sorgular
  • Kullanıcı çalışır "ibstatKarşılaştırma için sorunlu sunucudan ve beklendiği gibi çalışan sunucudan " komutu 
Örnek:
Sorunlu Mellanox kartı "InfiniBand" olarak gösterilen bağlantı katmanı bulundu 
 

Şekil 2: "InfiniBand" bağlantılı sorunlu bir Mellanox kartının ekran görüntüsü
 
Tasarlandığı gibi çalışan Mellanox kartı, "Ethernet" olarak gösterilen bağlantı katmanını buldu 
Tasarlandığı gibi çalışan ekran görüntüsü
Şekil 3: Tasarlandığı gibi çalışan ekran görüntüsü "Ethernet" bağlantılı Mellanox kartı


InfiniBand anahtarına mı yoksa Ethernet anahtarına mı bağlı olduğu Kullanıcıyla birlikte teyit edilir 

  • Kullanıcı, Mellanox kartının bir Ethernet anahtarına bağlı olduğunu onaylar 

Cause

Açıklamalar

  • Bu bir ConnectX-5 VPI kartı olduğundan, Ethernet modunu veya InfiniBand modunu çalıştıracak şekilde ayarlanabilir.
  • Bu kart InfiniBand modunda çalışıyorsa, Ethernet anahtarıyla bağlantı kuramaz.
  • Yedek kart varsayılan bağlantı modu her zaman InfiniBand üzerinde olmalıdır.

Resolution

NVIDIA makalesini takip edin Kullanma mlxconfig Bu köprü bağlantı sizi Dell Technologies dışındaki bir web sitesine yönlendirir.Ayar için IB/ETH Parametre.

Ayarlamak için IB/ETH Parametreler mlxconfig, aşağıdaki komut satırını kullanın:

# mlxconfig -d <device> set [LINK_TYPE_P1=<link_type>] [LINK_TYPE_P2=<link_type>]

Örnek:
Her iki bağlantı noktasını da Ethernet olarak yapılandırma:

# mlxconfig -d /dev/mst/mt4119_pciconf0 set LINK_TYPE_P1=2 LINK_TYPE_P2=2

Device #1:
----------
Device type:    ConnectX5
Name:           MCX556A-ECA_Ax
Description:    ConnectX-5 VPI adapter card; EDR IB (100Gb/s) and 100GbE; dual-port QSFP28; PCIe3.0 x16; tall bracket; ROHS R6
Device:         /dev/mst/mt4119_pciconf0
  
Configurations:                              Next Boot       New
         LINK_TYPE_P1                        IB(1)          ETH(2)
         LINK_TYPE_P2                        IB(1)          ETH(2)
  
Apply new Configuration? (y/n) [n] : y
Applying... Done!
-I- Please reboot machine to load new configurations.

Remarks
P1 = Port 1 
P2 = Port 2
Value 1 for InfiniBand 
Value 2 for Ethernet 


Diğer kaynaklar: 

Affected Products

Rack Servers, Tower Servers
Article Properties
Article Number: 000218037
Article Type: Solution
Last Modified: 07 May 2025
Version:  2
Find answers to your questions from other Dell users
Support Services
Check if your device is covered by Support Services.