PowerEdge: ESXi 7.0 U3 – Netzwerkport fehlt Interrupt und Link kann nicht initialisiert werden

Server mit einer großen Anzahl von installierten Netzwerkschnittstellenkarten (NICs) bemerken nach dem Start von ESXi 7.0 einen Link-Down auf NIC-Ports.

Die Netzwerkkartenkonfiguration lautet wie folgt:

Analyse:

1. Bestätigen, dass die Funktion mit der Netzwerkkarte slot7 funktioniert, durch Durchführen eines Loopback-Tests im BIOS.
2. Erfassung von BS-Protokollen und Analyse der vobd Protokoll festgestellt, dass Steckplatz 7 Port 3 und Port 4, die VMNIC16 und 17 entsprechen, nicht als Gerät registriert sind.
3. Überprüfen Sie die Spalte VMkernel log und stellte fest, dass die entsprechende hexadezimale ID b4:00.3 berichtet "failed to allocate 64 MSIX interrupts“.

BS-Version:

• VMware ESXi 7.0.3 Build-23794027
• VMware ESXi 7.0 U3

Informationen zum NIC-Treiber:

bnxtnet                        231.0.153.0-1OEM.700.1.0.15843807      BCM     VMwareCertified   2025-03-28


180 : 00 : 00        Broadcom Inc. and subsidiaries        NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE        NIC.Slot.7-1-1

180 : 00 : 01        Broadcom Inc. and subsidiaries        NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE        NIC.Slot.7-2-1

180 : 00 : 02        Broadcom Inc. and subsidiaries        NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE        NIC.Slot.7-3-1

180 : 00 : 03        Broadcom Inc. and subsidiaries        NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE        NIC.Slot.7-4-1

vmnic：

0000:b4:00.0 Ethernet controller: Broadcom NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE Ethernet [vmnic14]  in  PCIe Slot 7

0000:b4:00.1 Ethernet controller: Broadcom NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE Ethernet [vmnic15]  in  PCIe Slot 7

0000:b4:00.2 Ethernet controller: Broadcom NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE Ethernet [vmnic16]  in  PCIe Slot 7

0000:b4:00.3 Ethernet controller: Broadcom NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE Ethernet [vmnic17]  in  PCIe Slot 7

vobd Log:

2025-04-03T14:58:31.645Z: [netCorrelator] 13121287320us: [vob.net.vmnic.linkstate.up] vmnic vmnic13 linkstate up

2025-04-03T15:03:56.295Z: [netCorrelator] 13445937328us: [vob.net.vmnic.linkstate.down] vmnic vmnic13 linkstate down

2025-04-03T16:57:06.411Z: [netCorrelator] 20236053468us: [vob.net.vmnic.linkstate.up] vmnic vmnic5 linkstate up

2025-04-03T17:25:17.682Z: [netCorrelator] 21927324575us: [vob.net.vmnic.linkstate.up] vmnic vmnic14 linkstate up

2025-04-03T17:26:56.888Z: [netCorrelator] 22026529736us: [vob.net.vmnic.linkstate.up] vmnic vmnic15 linkstate up

VMkernel:

Line 42990: 2025-04-01T18:42:40.775Z cpu47:2097967)WARNING: VMK_PCI: 598: device 0000:b4:00.3 failed to allocate 64 MSIX interrupts

Line 43540: 2025-04-01T18:42:48.232Z cpu2:2099020)WARNING: VMK_PCI: 598: device 0000:b4:00.2 failed to allocate 64 MSIX interrupts

Line 43589: 2025-04-01T18:42:48.378Z cpu2:2099020)WARNING: VMK_PCI: 598: device 0000:b4:00.3 failed to allocate 64 MSIX interrupts

Line 54191: 2025-04-03T11:20:14.710Z cpu0:2097969)WARNING: VMK_PCI: 598: device 0000:b4:00.2 failed to allocate 64 MSIX interrupts

Line 54254: 2025-04-03T11:20:14.767Z cpu6:2097969)WARNING: VMK_PCI: 598: device 0000:b4:00.3 failed to allocate 64 MSIX interrupts

Line 54801: 2025-04-03T11:20:22.225Z cpu48:2099006)WARNING: VMK_PCI: 598: device 0000:b4:00.2 failed to allocate 64 MSIX interrupts

Line 54850: 2025-04-03T11:20:22.398Z cpu48:2099006)WARNING: VMK_PCI: 598: device 0000:b4:00.3 failed to allocate 64 MSIX interrupts

ESXi erkennt nicht alle vmnic Adaptern, aber diese vmnic Adapter werden in "lspci" und nicht in esxcfg-nics -l. 

Im vmkernel.log -Datei des ESXi-Hosts werden Einträge ähnlich den folgenden angezeigt:

xxxx:xx:xx.x failed to allocate 64 MSIX interrupts

Weitere Informationen finden Sie im Broadcom-Wissensdatenbank-Artikel zum Erhöhen von maxIntrCookies, wenn das Standardlimit in ESXi  

erreicht ist.maxIntrCookiesDer Standardwert wurde in ESXi Version 8 auf 4096 erhöht, um dieses Problem zu beheben. Host aktualisieren "maxIntrCookies" auf 4096, wobei Werte unter 4096 liegen.

Problemumgehung:
Um dieses Problem zu umgehen, passen Sie die Startoption an "maxIntrCookies" auf 4096, um die Interrupt-Grenze zu erhöhen.

Der Standardwert für "maxIntrCookies" hängt von der verwendeten ESXi-Version ab und davon, ob der Wert für die erweiterten Einstellungen manuell höher eingestellt wurde, bevor ein Upgrade eines Hosts auf ESXi-Version 8 durchgeführt wurde, bei dem der Standardwert erhöht wurde.  

• Der Standardwert für "maxIntrCookies" in ESXi Version 7.x ist auf 1024 festgelegt.
• Der Standardwert in ESXi Version 8 wurde auf 4096 erhöht.

Hinweis: Die maximale Anzahl von Interrupt-Cookies ist auf 4096 begrenzt, auch wenn Sie sie auf einen Wert von > 4096 festlegen.
Weitere Informationen zum Konfigurieren der Startoptionen finden Sie unter Konfigurieren erweiterter Optionen für ESXi/ESX (310338). 


SSH zu ESXi CLI:

esxcli system settings kernel set -s maxIntrCookies -v 4096

/sbin/auto-backup.sh