PowerEdge: ESXi 7.0 U3 – koblingen mangler i nettverksporten og kan ikke initialisere

Servere med et stort antall nettverksgrensesnittkort (NIC-er) installert merker kobling ned på NIC-porter etter oppstart ESXi 7.0.

Nettverkskortkonfigurasjonen er som følger:

Analyse:

1. Bekreftet at funksjonaliteten fungerer med spor 7-nettverkskort ved å utføre en tilbakekoblingstest i BIOS.
2. Innhentet operativsystemlogger og analysert vobd logg, fant at spor 7 port3 og port4 som tilsvarer vmnic16 og 17 ikke er registrert som en enhet.
3. Sjekk ikonet VMkernel logg og fant at den tilsvarende heksadesimale ID-en b4:00.3 rapporterte "failed to allocate 64 MSIX interrupts."

OS-versjon:

• VMware ESXi 7.0.3 build-23794027
• VMware ESXi 7.0 U3

Informasjon om NIC-driveren:

bnxtnet                        231.0.153.0-1OEM.700.1.0.15843807      BCM     VMwareCertified   2025-03-28


180 : 00 : 00        Broadcom Inc. and subsidiaries        NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE        NIC.Slot.7-1-1

180 : 00 : 01        Broadcom Inc. and subsidiaries        NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE        NIC.Slot.7-2-1

180 : 00 : 02        Broadcom Inc. and subsidiaries        NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE        NIC.Slot.7-3-1

180 : 00 : 03        Broadcom Inc. and subsidiaries        NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE        NIC.Slot.7-4-1

vmnic：

0000:b4:00.0 Ethernet controller: Broadcom NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE Ethernet [vmnic14]  in  PCIe Slot 7

0000:b4:00.1 Ethernet controller: Broadcom NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE Ethernet [vmnic15]  in  PCIe Slot 7

0000:b4:00.2 Ethernet controller: Broadcom NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE Ethernet [vmnic16]  in  PCIe Slot 7

0000:b4:00.3 Ethernet controller: Broadcom NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE Ethernet [vmnic17]  in  PCIe Slot 7

vobd logg:

2025-04-03T14:58:31.645Z: [netCorrelator] 13121287320us: [vob.net.vmnic.linkstate.up] vmnic vmnic13 linkstate up

2025-04-03T15:03:56.295Z: [netCorrelator] 13445937328us: [vob.net.vmnic.linkstate.down] vmnic vmnic13 linkstate down

2025-04-03T16:57:06.411Z: [netCorrelator] 20236053468us: [vob.net.vmnic.linkstate.up] vmnic vmnic5 linkstate up

2025-04-03T17:25:17.682Z: [netCorrelator] 21927324575us: [vob.net.vmnic.linkstate.up] vmnic vmnic14 linkstate up

2025-04-03T17:26:56.888Z: [netCorrelator] 22026529736us: [vob.net.vmnic.linkstate.up] vmnic vmnic15 linkstate up

VMkernel:

Line 42990: 2025-04-01T18:42:40.775Z cpu47:2097967)WARNING: VMK_PCI: 598: device 0000:b4:00.3 failed to allocate 64 MSIX interrupts

Line 43540: 2025-04-01T18:42:48.232Z cpu2:2099020)WARNING: VMK_PCI: 598: device 0000:b4:00.2 failed to allocate 64 MSIX interrupts

Line 43589: 2025-04-01T18:42:48.378Z cpu2:2099020)WARNING: VMK_PCI: 598: device 0000:b4:00.3 failed to allocate 64 MSIX interrupts

Line 54191: 2025-04-03T11:20:14.710Z cpu0:2097969)WARNING: VMK_PCI: 598: device 0000:b4:00.2 failed to allocate 64 MSIX interrupts

Line 54254: 2025-04-03T11:20:14.767Z cpu6:2097969)WARNING: VMK_PCI: 598: device 0000:b4:00.3 failed to allocate 64 MSIX interrupts

Line 54801: 2025-04-03T11:20:22.225Z cpu48:2099006)WARNING: VMK_PCI: 598: device 0000:b4:00.2 failed to allocate 64 MSIX interrupts

Line 54850: 2025-04-03T11:20:22.398Z cpu48:2099006)WARNING: VMK_PCI: 598: device 0000:b4:00.3 failed to allocate 64 MSIX interrupts

ESXi oppdager ikke alle vmnic adaptere, men, de vmnic Adaptere vises i "lspci" og ikke i esxcfg-nics -l. 

I den vmkernel.log fil av ESXi-verten, ser du oppføringer som ligner på:

xxxx:xx:xx.x failed to allocate 64 MSIX interrupts

Se kunnskapsartikkelen Broadcom Hvordan øke maxIntrCookies hvis standardgrensen nås i ESXi  

"maxIntrCookies" standardverdien ble økt til 4096 i ESXi versjon 8 for å løse dette problemet. Oppdater verten "maxIntrCookies" innstillinger til 4096 der verdier er funnet å være satt under 4096.

Løsning:
Du kan omgå dette problemet ved å justere oppstartsalternativet "maxIntrCookies" til 4096 for å øke avbruddsgrensen.

Standardverdien for "maxIntrCookies" avhenger av ESXi-versjonen som er i bruk, og om verdien for avanserte innstillinger ble satt høyere manuelt før en vert ble oppgradert til ESXi versjon 8, der standardverdien ble økt.  

• ESXi versjon 7.x "maxIntrCookies" standardverdien er satt til 1024
• Standardverdien i ESXi versjon 8 ble økt til 4096.

Merk: De maksimale avbruddsinformasjonskapslene er begrenset til 4096, selv om du setter den til en verdi som er > 4096.
Hvis du vil ha mer informasjon om instruksjoner om hvordan du konfigurerer oppstartsalternativer, kan du se Konfigurere avanserte alternativer for ESXi/ESX (310338). 


SSH til ESXi CLI:

esxcli system settings kernel set -s maxIntrCookies -v 4096

/sbin/auto-backup.sh