NVP vProxy: Zobrazení VMware se neaktualizuje a všechny zálohy virtuálních počítačů selžou.

• Na server NetWorker se přidávají nástroje VMware vCenter za účelem provádění záloh NetWorker VMware Protection vProxy.
• Kartu NetWorker Management Console > Protection >VMware View se nedaří aktualizovat:

Error fetching vCenter information for: vCenter_Name

Reason(s): Unable to fetch data from vCenter: End of file or no input: Operation interrupted or timed out (3600 s receive delay) (3600 s send delay).

• Automatizovaný nsrvim Proces používaný k dotazování inventáře vCenter selhává. daemon.log serveru NetWorker hlásí:

106637 MM/DD/YYYY HH:MM:SS AM/PM  1 3 0 6508 3964 0 NetWorker_Hostname nsrdisp_nwbg RAP notice job 'nsrvim' progress message: nsrvim starting on NetWorker_Hostname (process 6252). 
106637 MM/DD/YYYY HH:MM:SS AM/PM  1 3 0 6508 3964 0 NetWorker_Hostname nsrdisp_nwbg RAP notice job 'nsrvim' progress message: Connecting to NetWorker on 'NetWorker_Hostname'. 
106637 MM/DD/YYYY HH:MM:SS AM/PM  1 3 0 6508 3964 0 NetWorker_Hostname nsrdisp_nwbg RAP notice job 'nsrvim' progress message: Querying NSR hypervisor resource 'vCenter_Hostname' 
106637 MM/DD/YYYY HH:MM:SS AM/PM  1 3 0 6508 3964 0 NetWorker_Hostname nsrdisp_nwbg RAP notice job 'nsrvim' progress message: Connecting to service at https://vCenter_Hostname/sdk 
106637 MM/DD/YYYY HH:MM:SS AM/PM  1 3 0 6508 3964 0 NetWorker_Hostname nsrdisp_nwbg RAP notice job 'nsrvim' progress message: Starting session with infrastructure services daemon. 
106637 MM/DD/YYYY HH:MM:SS AM/PM  1 3 0 5648 7592 0 NetWorker_Hostname nsrdisp_nwbg RAP notice job 'nsrvim' progress message: Querying for inventory at https://vCenter_Hostname/sdk 
106637 MM/DD/YYYY HH:MM:SS AM/PM  1 3 0 7952 8524 0 NetWorker_Hostname nsrdisp_nwbg RAP notice job 'nsrvim' progress message: Querying for inventory at https://vCenter_Hostname/sdk 
106637 MM/DD/YYYY HH:MM:SS AM/PM  1 3 0 3624 4728 0 NetWorker_Hostname nsrdisp_nwbg RAP notice job 'nsrvim' progress message: Querying for inventory at https://vCenter_Hostname/sdk 
106637 MM/DD/YYYY HH:MM:SS AM/PM  1 3 0 6508 3964 0 NetWorker_Hostname nsrdisp_nwbg RAP notice job 'nsrvim' progress message: Querying for inventory at https://vCenter_Hostname/sdk 
106637 MM/DD/YYYY HH:MM:SS AM/PM  1 3 0 2228 7760 0 NetWorker_Hostname nsrdisp_nwbg RAP notice job 'nsrvim' progress message: End of file or no input: Operation interrupted or timed out (3600 s receive delay) (3600 s send delay)

Linux: /nsr/logs/daemon.raw
Windows: C:\Program Files\EMC NetWorker\nsr\logs\daemon.raw
NetWorker: NetWorker: How to use nsr_render_log 
NetWorker: NetWorker: How to automatically render daemon.raw to daemon.log in real time 

• Zálohování virtuálního počítače z nástroje vCenter selže a v protokolu relace zálohování se zobrazí podobná chybová zpráva:

MM/DD/YYYY HH:MM:SS AM/PM Failed to run nsrvim, error: Unable to fetch data from vCenter: End of file or no input: Operation interrupted or timed out (3600 s receive delay) (3600 s send delay).
MM/DD/YYYY HH:MM:SS AM/PM Failed to get work items. Will retry in 360 seconds.
MM/DD/YYYY HH:MM:SS AM/PM Starting nsrvim.
MM/DD/YYYY HH:MM:SS AM/PM Calling the nsrvim program to collect the inventory data.
MM/DD/YYYY HH:MM:SS AM/PM Setting default timeout 1800.
MM/DD/YYYY HH:MM:SS AM/PM Using a timeout of 1800 seconds for the nsrvim request. Minimum timeout is 360 seconds. Maximum timeout is 3600 seconds.
MM/DD/YYYY HH:MM:SS AM/PM Failed to run nsrvim, error: Unable to fetch data from vCenter: End of file or no input: Operation interrupted or timed out (3600 s receive delay) (3600 s send delay).
MM/DD/YYYY HH:MM:SS AM/PM Unable to fetch data from vCenter: End of file or no input: Operation interrupted or timed out (3600 s receive delay) (3600 s send delay)
MM/DD/YYYY HH:MM:SS AM/PM Action backup vmware-vproxy 'backup' with job id 1769899 is exiting with status 'failed', exit code 1
MM/DD/YYYY HH:MM:SS AM/PM Action has finished with failures.

Linux: /nsr/log/policy/Policy_Name/Workflow_Name
Windows: C:\Program Files\EMC NetWorker\nsr\logs\policy\Policy_Name\Workflow_Name

• Server NetWorker se může připojit k portu 443 na serveru vCenter:

Windows (PowerShell): tnc vCenter_Hostname -port 443
Linux: curl -v vCenter_Hostname:443
NetWorker command: nsrports -t vCenter_Hostname -p 443

• Popsané chyby a příznaky mohou být konzistentní nebo se mohou vyskytovat občas.

Vrácená chyba spočívá v tom, že operace byla přerušena nebo vypršel její časový limit. Časový limit je však 3 600 s (1 hodina) a chyba se zobrazí před překročením prahové hodnoty 1 hodiny. Proces byl přerušen.

• Problém se síťovým směrováním nebo bránou firewall.
• Server vCenter ukončuje připojení před nsrvim Proces inventarizace byl dokončen.

Scénář případu 1: Firewall je nakonfigurován s adaptivním pravidlem, které umožňuje serveru NetWorker připojit se k nástroji vCenter přes 443, ale ukončí připojení, zatímco nsrvim probíhá inventarizace nástroje vCenter.

Scénář případu 2: Server vCenter odesílá segment FIN během nsrvim aplikační PDU. 

U serveru NetWorker nsrvim proces se používá k dotazování serverů vCenter na prostředky VMware. Tento proces se ve výchozím nastavení spouští na serveru NetWorker každých 15 minut, kdykoli je v nástroji VMware View konzole NMC nebo spuštěna úloha ochrany virtuálního počítače.

Správce sítě nebo brány firewall musí ověřit, zda existují nějaká pravidla brány firewall, která blokují nebo zastavují připojení mezi serverem NetWorker a serverem vCenter přes port 443. Pokud existují nějaká pravidla, dočasně je zakažte, abyste zjistili, zda je problém v NetWorker vyřešen. Pokud zakázání pravidel umožňuje obnovení zobrazení VMware a dokončení záloh VMware, je nutné provést změny v bráně firewall nebo pravidlech směrování, aby nedošlo k přerušení spojení mezi serverem NetWorker a nástrojem vCenter.

Požadované porty a diagramy topologie sítě jsou podrobně popsány v průvodci integrací NetWorker VMware, který je k dispozici na stránkách podpory společnosti Dell na stránce Informace o podpoře NetWorker.

Správce sítě může také použít nástroje pro zachytávání paketů (tcpdump, Wireshark) ze serveru NetWorker a nástroje vCenter. Při reprodukování problému zkontrolujte zachycení paketů a zjistěte, zda server vCenter nezavírá relaci inventáře.

Windows: https://www.wireshark.org/
Linux Server NetWorker a vCenter: https://www.tcpdump.org/manpages/tcpdump.1.html

tcpdump Příklad příkazu:

nohup tcpdump -i any -s 0 -C 500 -w /tmp/`hostname`_`date -I`.pcap &

• nohup označuje, že příkaz je spuštěn na pozadí, dokud není identifikátor PID ukončen kill .
• -i určuje rozhraní, které můžete použít anynebo zadejte název systémového síťového rozhraní, například eth0.
• -s 0 určuje délku kroku 65535 (zachytí se celý snímek).
• -C 500 označuje velikost souboru 500 000 000 bajtů.
• -w označuje umístění výstupního souboru. Zobrazený výstupní soubor se automaticky vygeneruje s názvem hostitele systému a RRRR-MM-DD, že byl spuštěn. Soubor .pcap je možné analyzovat ve Wiresharku.

dbgcommand -n nsrdispd Debug=9

nsrvim -D7 -d vCenter_Hostname > {Path_to_output_file} 2<&1

nve:~ # dbgcommand -n nsrdispd Debug=9
Process ID List : 14600
Processing PID:14600
nve:~ # nsrvim -D7 -d vcsa.amer.lan > /tmp/nsrvim.out 2<&1
nve:~ # ls -l /tmp | grep nsrvim
-rw------- 1 root      root      60025 May 22 10:18 nsrvim.out
nve:~ #

3. Chyba je hlášena v daemon.raw serveru NetWorker.

Linux: /nsr/logs/daemon.raw
Windows: C:\Program Files\EMC NetWorker\nsr\logs\daemon.raw
NetWorker: NetWorker: How to use nsr_render_log 
NetWorker: NetWorker: How to automatically render daemon.raw to daemon.log in real time 

4. Zakažte nsrdispd Ladění a zastavení tcpdump:

dbgcommand -n nsrdispd Debug=0

ps -ef | grep tcpdump

kill -9 PID_of_tcpdump

nve:~ # dbgcommand -n nsrdispd Debug=0
Process ID List : 14600
Processing PID:14600
nve:~ # ps -ef | grep tcpdump
root     29439 29267  0 10:01 pts/0    00:00:00 tcpdump -i any -s 0 -C 500 -w /tmp/nve_2024-05-22.pcap
root     29882 29267  0 10:13 pts/0    00:00:00 grep --color=auto tcpdump
nve:~ # kill -9 29439
nve:~ # ps -ef | grep tcpdump
root     29890 29267  0 10:13 pts/0    00:00:00 grep --color=auto tcpdump
[1]+  Killed                  nohup tcpdump -i any -s 0 -C 500 -w /tmp/`hostname`_`date -I`.pcap
nve:~ # ps -ef | grep tcpdump
root     29893 29267  0 10:13 pts/0    00:00:00 grep --color=auto tcpdump
nve:~ # ls -l /tmp | grep pcap
-rw------- 1 root      root    5464064 May 22 10:13 nve_2024-05-22.pcap
nve:~ #

Nástroj NetWorker 19.10 a novější umožňuje správci zálohování změnit nsrvim interval. Výchozí interval je 15 minut; To však lze prodloužit na libovolný interval až do 60 minut. Tato funkce je podrobně popsána v NVP vProxy: Proces nsrvim NetWorker se spouští každých 15 minut, což způsobuje vysoké zatížení nástroje vCenter Server a potenciální nedostupnost VPXD.