PowerEdge：ESXi 7.0 U3 - 網路連接埠遺失中斷且無法初始化連結

在啟動 ESXi 7.0 後，安裝了大量網路介面卡 （NIC） 的伺服器注意到 NIC 連接埠上的連結中斷。

網卡組態如下：

分析：

1. 在 BIOS 中執行迴路測試，確認功能可搭配插槽 7 網路卡使用。
2. 已收集作業系統記錄並分析 vobd 記錄中，發現對應至 VMNIC16 和 17 的插槽 7 port3 和 port4 並未註冊為裝置。
3. 檢查 VMkernel 記錄並找到對應的十六進位 ID b4:00.3 報導”failed to allocate 64 MSIX interrupts.」

作業系統版本：

• VMware ESXi 7.0.3 組建-23794027
• VMware ESXi 7.0 U3

NIC 驅動程式資訊：

bnxtnet                        231.0.153.0-1OEM.700.1.0.15843807      BCM     VMwareCertified   2025-03-28


180 : 00 : 00        Broadcom Inc. and subsidiaries        NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE        NIC.Slot.7-1-1

180 : 00 : 01        Broadcom Inc. and subsidiaries        NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE        NIC.Slot.7-2-1

180 : 00 : 02        Broadcom Inc. and subsidiaries        NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE        NIC.Slot.7-3-1

180 : 00 : 03        Broadcom Inc. and subsidiaries        NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE        NIC.Slot.7-4-1

vmnic：

0000:b4:00.0 Ethernet controller: Broadcom NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE Ethernet [vmnic14]  in  PCIe Slot 7

0000:b4:00.1 Ethernet controller: Broadcom NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE Ethernet [vmnic15]  in  PCIe Slot 7

0000:b4:00.2 Ethernet controller: Broadcom NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE Ethernet [vmnic16]  in  PCIe Slot 7

0000:b4:00.3 Ethernet controller: Broadcom NetXtreme-E P425D BCM57504 4x25G SFP28 PCIE Ethernet [vmnic17]  in  PCIe Slot 7

vobd 記錄：

2025-04-03T14:58:31.645Z: [netCorrelator] 13121287320us: [vob.net.vmnic.linkstate.up] vmnic vmnic13 linkstate up

2025-04-03T15:03:56.295Z: [netCorrelator] 13445937328us: [vob.net.vmnic.linkstate.down] vmnic vmnic13 linkstate down

2025-04-03T16:57:06.411Z: [netCorrelator] 20236053468us: [vob.net.vmnic.linkstate.up] vmnic vmnic5 linkstate up

2025-04-03T17:25:17.682Z: [netCorrelator] 21927324575us: [vob.net.vmnic.linkstate.up] vmnic vmnic14 linkstate up

2025-04-03T17:26:56.888Z: [netCorrelator] 22026529736us: [vob.net.vmnic.linkstate.up] vmnic vmnic15 linkstate up

VMkernel：

Line 42990: 2025-04-01T18:42:40.775Z cpu47:2097967)WARNING: VMK_PCI: 598: device 0000:b4:00.3 failed to allocate 64 MSIX interrupts

Line 43540: 2025-04-01T18:42:48.232Z cpu2:2099020)WARNING: VMK_PCI: 598: device 0000:b4:00.2 failed to allocate 64 MSIX interrupts

Line 43589: 2025-04-01T18:42:48.378Z cpu2:2099020)WARNING: VMK_PCI: 598: device 0000:b4:00.3 failed to allocate 64 MSIX interrupts

Line 54191: 2025-04-03T11:20:14.710Z cpu0:2097969)WARNING: VMK_PCI: 598: device 0000:b4:00.2 failed to allocate 64 MSIX interrupts

Line 54254: 2025-04-03T11:20:14.767Z cpu6:2097969)WARNING: VMK_PCI: 598: device 0000:b4:00.3 failed to allocate 64 MSIX interrupts

Line 54801: 2025-04-03T11:20:22.225Z cpu48:2099006)WARNING: VMK_PCI: 598: device 0000:b4:00.2 failed to allocate 64 MSIX interrupts

Line 54850: 2025-04-03T11:20:22.398Z cpu48:2099006)WARNING: VMK_PCI: 598: device 0000:b4:00.3 failed to allocate 64 MSIX interrupts

ESXi 未偵測到所有的 vmnic 適配器，但是，那些 vmnic 配接卡出現在「lspci“而不是在 esxcfg-nics -l. 

在 vmkernel.log 檔案中，您會看到類似以下內容的項目：

xxxx:xx:xx.x failed to allocate 64 MSIX interrupts

請參閱 Broadcom 知識文章，如果已在 ESXi  

中達到預設限制，如何增加 maxIntrCookiesmaxIntrCookies」在 ESXi 版本 8 中將預設值增加到 4096，以解決此問題。更新主機「maxIntrCookies」設定為 4096，其中發現值設定低於 4096。

因應措施：
要變通解決此問題，請調整引導選項”maxIntrCookies」以增加中斷限制。

“ 的預設值”maxIntrCookies」取決於使用中的 ESXi 版本，以及進階設定值是否在主機升級至 ESXi 版本 8 之前手動設定得更高，其中預設值已提高。  

• ESXi 版本 7.x「maxIntrCookies」的預設值設定為 1024
• ESXi 版本 8 中的預設值已增加到 4096。

注意：最大中斷 Cookie 的上限為 4096，即使將其 > 設置為 4096 的值也是如此。
如需有關如何設定開機選項的說明詳細資訊，請參閱設定 ESXi/ESX （310338） 的進階選項。


SSH 至 ESXi CLI：

esxcli system settings kernel set -s maxIntrCookies -v 4096

/sbin/auto-backup.sh