NVP vProxy: VMware Görünümü Yenilenmiyor ve Tüm VM Yedeklemeleri Başarısız Oluyor
Summary: NetWorker VMware Protection (NVP) sürekli veya aralıklı olarak "Dosya sonu veya giriş yok: İşlem kesintiye uğradı" veya "zaman aşımı (3600 sn alma gecikmesi) (3600 sn gönderme gecikmesi)" yedekleme oturumu günlüğüne kaydedildi. NetWorker Management Console (NMC) VMware View yenilemesi sürekli veya aralıklı olarak aynı "End of file: İşlem kesintiye uğradı veya zaman aşımına uğradı" hatası VMware envanter (nsrvim) işlemleri sırasında NetWorker sunucusu daemon.log de aynı hatayı verir. ...
Symptoms
- VMware vCenter'lar, NetWorker VMware Protection vProxy yedeklemeleri gerçekleştirmek için NetWorker sunucusuna eklenir.
- NetWorker Management Console>Protection>VMware View sekmesi yenilenemiyor:

Error fetching vCenter information for: vCenter_Name Reason(s): Unable to fetch data from vCenter: End of file or no input: Operation interrupted or timed out (3600 s receive delay) (3600 s send delay).
- Otomatikleştirilmiş
nsrvimVCenter envanterini sorgulamak için kullanılan işlem başarısız oluyor. NetWorker sunucusundaki daemon.log şu raporlar:
106637 MM/DD/YYYY HH:MM:SS AM/PM 1 3 0 6508 3964 0 NetWorker_Hostname nsrdisp_nwbg RAP notice job 'nsrvim' progress message: nsrvim starting on NetWorker_Hostname (process 6252). 106637 MM/DD/YYYY HH:MM:SS AM/PM 1 3 0 6508 3964 0 NetWorker_Hostname nsrdisp_nwbg RAP notice job 'nsrvim' progress message: Connecting to NetWorker on 'NetWorker_Hostname'. 106637 MM/DD/YYYY HH:MM:SS AM/PM 1 3 0 6508 3964 0 NetWorker_Hostname nsrdisp_nwbg RAP notice job 'nsrvim' progress message: Querying NSR hypervisor resource 'vCenter_Hostname' 106637 MM/DD/YYYY HH:MM:SS AM/PM 1 3 0 6508 3964 0 NetWorker_Hostname nsrdisp_nwbg RAP notice job 'nsrvim' progress message: Connecting to service at https://vCenter_Hostname/sdk 106637 MM/DD/YYYY HH:MM:SS AM/PM 1 3 0 6508 3964 0 NetWorker_Hostname nsrdisp_nwbg RAP notice job 'nsrvim' progress message: Starting session with infrastructure services daemon. 106637 MM/DD/YYYY HH:MM:SS AM/PM 1 3 0 5648 7592 0 NetWorker_Hostname nsrdisp_nwbg RAP notice job 'nsrvim' progress message: Querying for inventory at https://vCenter_Hostname/sdk 106637 MM/DD/YYYY HH:MM:SS AM/PM 1 3 0 7952 8524 0 NetWorker_Hostname nsrdisp_nwbg RAP notice job 'nsrvim' progress message: Querying for inventory at https://vCenter_Hostname/sdk 106637 MM/DD/YYYY HH:MM:SS AM/PM 1 3 0 3624 4728 0 NetWorker_Hostname nsrdisp_nwbg RAP notice job 'nsrvim' progress message: Querying for inventory at https://vCenter_Hostname/sdk 106637 MM/DD/YYYY HH:MM:SS AM/PM 1 3 0 6508 3964 0 NetWorker_Hostname nsrdisp_nwbg RAP notice job 'nsrvim' progress message: Querying for inventory at https://vCenter_Hostname/sdk 106637 MM/DD/YYYY HH:MM:SS AM/PM 1 3 0 2228 7760 0 NetWorker_Hostname nsrdisp_nwbg RAP notice job 'nsrvim' progress message: End of file or no input: Operation interrupted or timed out (3600 s receive delay) (3600 s send delay)
Linux: /nsr/logs/daemon.raw Windows: C:\Program Files\EMC NetWorker\nsr\logs\daemon.raw NetWorker: NetWorker: How to use nsr_render_log NetWorker: NetWorker: How to automatically render daemon.raw to daemon.log in real time
- VCenter'dan sanal makine (VM) yedeklemeleri, yedekleme oturumu günlüğünde bildirilen benzer bir hata mesajıyla başarısız oluyor:
MM/DD/YYYY HH:MM:SS AM/PM Failed to run nsrvim, error: Unable to fetch data from vCenter: End of file or no input: Operation interrupted or timed out (3600 s receive delay) (3600 s send delay). MM/DD/YYYY HH:MM:SS AM/PM Failed to get work items. Will retry in 360 seconds. MM/DD/YYYY HH:MM:SS AM/PM Starting nsrvim. MM/DD/YYYY HH:MM:SS AM/PM Calling the nsrvim program to collect the inventory data. MM/DD/YYYY HH:MM:SS AM/PM Setting default timeout 1800. MM/DD/YYYY HH:MM:SS AM/PM Using a timeout of 1800 seconds for the nsrvim request. Minimum timeout is 360 seconds. Maximum timeout is 3600 seconds. MM/DD/YYYY HH:MM:SS AM/PM Failed to run nsrvim, error: Unable to fetch data from vCenter: End of file or no input: Operation interrupted or timed out (3600 s receive delay) (3600 s send delay). MM/DD/YYYY HH:MM:SS AM/PM Unable to fetch data from vCenter: End of file or no input: Operation interrupted or timed out (3600 s receive delay) (3600 s send delay) MM/DD/YYYY HH:MM:SS AM/PM Action backup vmware-vproxy 'backup' with job id 1769899 is exiting with status 'failed', exit code 1 MM/DD/YYYY HH:MM:SS AM/PM Action has finished with failures.
Linux: /nsr/log/policy/Policy_Name/Workflow_Name Windows: C:\Program Files\EMC NetWorker\nsr\logs\policy\Policy_Name\Workflow_Name
- NetWorker sunucusu, vCenter Server'da 443 numaralı bağlantı noktasına ulaşabilir:
Windows (PowerShell): tnc vCenter_Hostname -port 443 Linux: curl -v vCenter_Hostname:443 NetWorker command: nsrports -t vCenter_Hostname -p 443
- Açıklanan hatalar ve belirtiler tutarlı olabilir veya aralıklı olarak ortaya çıkabilir.
Cause
Döndürülen hata, işlemin kesintiye uğraması veya zaman aşımına uğramasıdır. Ancak zaman aşımı 3600 saniyedir (1 saat) ve 1 saatlik eşik geçilmeden önce hata görüntülenir. İşlem kesintiye uğruyor.
- Ağ yönlendirme veya güvenlik duvarı sorunu.
- vCenter sunucusu, sağlayıcıdan önce bağlantıyı kapatıyor.
nsrvimEnvanter işlemi tamamlanır.
Durum 1 senaryosu: Güvenlik duvarı, NetWorker sunucusunun 443 üzerinden vCenter'a bağlanmasını sağlayan Adaptive Rule ile yapılandırılır. Ancak NetWorker'ın bağlantısı kapatılır nsrvim işlem, vCenter envanterini çıkarmaktır.
Durum 2 senaryosu: vCenter sunucusu, yerel sunucu nsrvim uygulama PDU.
NetWorker sunucusunun nsrvim işlemi, VMware kaynakları için vCenter sunucularını sorgulamak amacıyla kullanılır. Bu işlem, NMC'nin VMware Görünümünde her "yenileme" yapıldığında veya VM koruma işi başlatıldığında NetWorker sunucusunda varsayılan olarak her 15 dakikada bir çalışır.
Resolution
Ağ veya güvenlik duvarı yöneticisi, 443 numaralı bağlantı noktası üzerinden NetWorker sunucusu ile vCenter sunucusu arasındaki bağlantıları engelleyen veya durduran herhangi bir güvenlik duvarı kuralı olup olmadığını doğrulamalıdır. Herhangi bir kural varsa sorunun NetWorker'da çözülüp çözülmediğini görmek için bunları geçici olarak devre dışı bırakın. Kuralların devre dışı bırakılması VMware View'un yenilenmesini ve VMware yedeklemelerinin tamamlanmasını sağlıyorsa NetWorker sunucusu ile vCenter arasındaki bağlantıların kesilmemesi için Güvenlik Duvarı veya yönlendirme kurallarında değişiklikler yapılmalıdır.
Gerekli bağlantı noktaları ve ağ topoloji şemaları, Dell Desteği'nde NetWorker Destek Bilgileri sayfasından erişilebilen NetWorker VMware Entegrasyon Rehberi'nde ayrıntılı olarak açıklanmıştır.
Ağ yöneticisi ayrıca paket yakalama araçlarını da kullanabilir (tcpdump, Wireshark) tarafından NetWorker sunucusundan ve vCenter'dan kaldırılmıştır. Sorun yeniden oluşturulduğunda, vCenter sunucusunun envanter oturumunu kapatıp kapatmadığını görmek için paket yakalamalarını gözden geçirin.
Windows: https://www.wireshark.org/
Linux NetWorker sunucusu ve vCenter sunucusu: https://www.tcpdump.org/manpages/tcpdump.1.html
tcpdump Komut Örneği:
nohup tcpdump -i any -s 0 -C 500 -w /tmp/`hostname`_`date -I`.pcap &
nohupseçeneği, komutun PID ile sonlandırılana kadar arka planda çalıştırılacağını belirtir.killkomut.-iArabirimi belirtir; şunları kullanabilirsiniz:anytıklatın veya eth0 gibi bir sistem ağ arayüzü adı belirtin.-s0, 65535 anlık görüntü uzunluğunu belirtir (karenin tamamı yakalanır).-C 500seçeneği, 500.000.000 baytlık bir dosya boyutunu belirtir.-wseçeneği çıktı dosyasının konumunu gösterir. Gösterilen çıktı dosyası, sistem ana bilgisayar adı ve çalıştırıldığı YYYY-AA-GG ile otomatik olarak oluşturulur. Bir .pcap dosyası Wireshark'ta analiz edilebilir.
2. Sorunu NetWorker da yeniden oluştururken şunu açın:
nsrdispd Hata ayıklayın ve nsrvim hata ayıklama ile komut.
dbgcommand -n nsrdispd Debug=9
nsrvim -D7 -d vCenter_Hostname > {Path_to_output_file} 2<&1
nve:~ # dbgcommand -n nsrdispd Debug=9 Process ID List : 14600 Processing PID:14600 nve:~ # nsrvim -D7 -d vcsa.amer.lan > /tmp/nsrvim.out 2<&1 nve:~ # ls -l /tmp | grep nsrvim -rw------- 1 root root 60025 May 22 10:18 nsrvim.out nve:~ #
3. Hata, NetWorker sunucusunun daemon.raw bildirilir.
Linux: /nsr/logs/daemon.raw Windows: C:\Program Files\EMC NetWorker\nsr\logs\daemon.raw NetWorker: NetWorker: How to use nsr_render_log NetWorker: NetWorker: How to automatically render daemon.raw to daemon.log in real time
4. Devre dışı bırakın nsrdispd Hata ayıklayın ve tcpdump:
dbgcommand -n nsrdispd Debug=0 ps -ef | grep tcpdump kill -9 PID_of_tcpdump
nve:~ # dbgcommand -n nsrdispd Debug=0 Process ID List : 14600 Processing PID:14600 nve:~ # ps -ef | grep tcpdump root 29439 29267 0 10:01 pts/0 00:00:00 tcpdump -i any -s 0 -C 500 -w /tmp/nve_2024-05-22.pcap root 29882 29267 0 10:13 pts/0 00:00:00 grep --color=auto tcpdump nve:~ # kill -9 29439 nve:~ # ps -ef | grep tcpdump root 29890 29267 0 10:13 pts/0 00:00:00 grep --color=auto tcpdump [1]+ Killed nohup tcpdump -i any -s 0 -C 500 -w /tmp/`hostname`_`date -I`.pcap nve:~ # ps -ef | grep tcpdump root 29893 29267 0 10:13 pts/0 00:00:00 grep --color=auto tcpdump nve:~ # ls -l /tmp | grep pcap -rw------- 1 root root 5464064 May 22 10:13 nve_2024-05-22.pcap nve:~ #
Bağlantıyı vCenter sunucusunun veya bir ağ aygıtının kapatıp kapatmadığını görmek için paket yakalamalarını gözden geçirin.
Additional Information
NetWorker 19.10 ve sonraki sürümler, yedekleme yöneticisinin nsrvim ara. Varsayılan aralık 15 dakikadır; Ancak bu, 60 dakikaya kadar herhangi bir aralığa uzatılabilir. Bu özellik NVP vProxy'de ayrıntılı olarak açıklanmıştır: NetWorker nsrvim işlemi her 15 dakikada bir çalışarak vCenter Server'da yüksek iş yüküne ve VPXD'nin kullanılamamasına neden olur.