Dell Unity: Unispheres grafiska användargränssnitt och CLI via SSH är inte längre tillgängliga efter försök att ändra DNS-inställningar (kan korrigeras av Dell)

Unispheres grafiska användargränssnitt och CLI är inte längre tillgängliga efter försök att ändra DNS-inställningar. Att starta om hanteringstjänsterna löser inte problemet. Det fastställdes också att ECOM inte körs på någon av lagringsprocessorerna eller att det körs i mer än 10 minuter.

Försök att använda följande KB för att starta om MGMT löser inte problemet:

Dell Unity: Unable to Access Unisphere The system is busy. (Det går inte att öppna Unisphere. Systemet är upptaget.) Försök igen senare (kan korrigeras av användaren)
https://www.dell.com/support/kbdoc/000056109

Command: svc_restart_service restart MGMT

Insamling av datainsamlingar visade att det fanns ECOM-dumpfiler. 

Omstart av varje SP enligt KB 000021439 gjorde att ECOM kunde fungera, men bara i 10 minuter åt gången. 

Dell Unity: Så här återställer eller felsöker du när hanteringstjänsten (ECOM) inte körs på någon av lagringsprocessorerna (kan korrigeras av användaren)
https://www.dell.com/support/kbdoc/000021439

Problemet uppstår när DNS-kommandot "papi_clust_set.sh dns xxx" har timeout och orsakat ECOM-panik. Det kan också inträffa när du använder Unisphere för att ändra DNS-inställningar eller ta bort en ny DNS-server.

Observera: IPMI-verktyget måste användas för att ansluta till någon av lagringsprocessorerna för att felsöka eftersom ECOM är nere.  

Prioritering och granskning av loggarna visade att batchjobb hade hängt sig från ett misslyckat försök att göra DNS-ändringar i Unity-systemet. 

Kommando som används för att kontrollera: uemcli /sys/task/job show -detail Interna loggar visade följande: 
 

cemtracer_sysapi logs 18 Jul 2023 21:51:36 - [SYSAPI] ERROR - {0:777251:881779993}[1053|3741|f70d6b40][doTimeoutAction @ /c4_working/Unity_PullRequest_Build_Driver_Sles15_RTM_1.1/clariion/components/adapters/SystemAPI/framework/src/ConfigMgr.cpp:403] Timeout action (poll): abort Aborting the system. 

ECOM-dumpfilerna kan visa tecken som liknar följande:

Search for "error" i cemtracer_sysapi.log showed:

xx Nov xxxx 13:27:52  - [SYSAPI] ERROR - {0:24803979:204377483}[18921|28516|f70d6b40][_watchDogRoutine @ /c4_working/Unity_PullRequest_Build_Driver_Sles15_RTM_1.1/clariion/components/adapters/SystemAPI/framework/src/UpdateManagerImpl.cpp:1511] Watch dog poll request timeout occured. Now:24803979204 TimeGap:900621 Is in Poll:0
xx Nov xxxx 13:27:52  - [SYSAPI] ERROR - {0:24803979:205104121}[18921|28516|f70d6b40][_watchDogRoutine @ /c4_working/Unity_PullRequest_Build_Driver_Sles15_RTM_1.1/clariion/components/adapters/SystemAPI/framework/src/UpdateManagerImpl.cpp:1512] PerfStatReport:
xx Nov xxxx 13:27:52  - [SYSAPI] ERROR - {0:24803979:206876577}[18921|28516|f70d6b40][_watchDogRoutine @ /c4_working/Unity_PullRequest_Build_Driver_Sles15_RTM_1.1/clariion/components/adapters/SystemAPI/framework/src/UpdateManagerImpl.cpp:1516] dependencyMap:
xx Nov xxxx 13:27:52  - [SYSAPI] ERROR - {0:24803979:206905718}[18921|28516|f70d6b40][doTimeoutAction @ /c4_working/Unity_PullRequest_Build_Driver_Sles15_RTM_1.1/clariion/components/adapters/SystemAPI/framework/src/ConfigMgr.cpp:403] Timeout action (poll): abort
xx Nov xxxx 23:16:07  - [SYSAPI] ERROR - {0:1379:344272630}[2919|6108|f17ffb40][Poll @ /c4_working/Unity_PullRequest_Build_Driver_Sles15_RTM_1.1/clariion/components/adapters/SystemAPI/framework/src/TLDPollManager.cpp:383] Admin PEER poll request failed.Error Code = 7e110000.
xx Nov xxxx 23:16:58  - [SYSAPI] ERROR - {0:1429:454592292}[2919|20591|d79ffb40][performRequestBase @ /c4_working/Unity_PullRequest_Build_Driver_Sles15_RTM_1.1/clariion/components/adapters/SystemAPI/framework/src/util/TLDUtils.cpp:346] Admin failed to process request (err = 2115043355):
  TAG_K10_ERROR_PACKET (0x10004)
   TAG_K10_ERROR_CODE (0x10005) num: 2115043355 (0x7e11001b) str: "...~" hex: 1b:0:11:7e
xx Nov xxxx 23:31:15  - [SYSAPI] ERROR - {0:2286:652151017}[2919|6535|f70d6b40][_watchDogRoutine @ /c4_working/Unity_PullRequest_Build_Driver_Sles15_RTM_1.1/clariion/components/adapters/SystemAPI/framework/src/UpdateManagerImpl.cpp:1511] Watch dog poll request timeout occured. Now:2286652 TimeGap:900650 Is in Poll:0
xx Nov xxxx 23:31:15  - [SYSAPI] ERROR - {0:2286:652504752}[2919|6535|f70d6b40][_watchDogRoutine @ /c4_working/Unity_PullRequest_Build_Driver_Sles15_RTM_1.1/clariion/components/adapters/SystemAPI/framework/src/UpdateManagerImpl.cpp:1512] PerfStatReport:
xx Nov xxxx 23:31:15  - [SYSAPI] ERROR - {0:2286:653466119}[2919|6535|f70d6b40][_watchDogRoutine @ /c4_working/Unity_PullRequest_Build_Driver_Sles15_RTM_1.1/clariion/components/adapters/SystemAPI/framework/src/UpdateManagerImpl.cpp:1516] dependencyMap:
xx Nov xxxx 23:31:15  - [SYSAPI] ERROR - {0:2286:653504952}[2919|6535|f70d6b40][doTimeoutAction @ /c4_working/Unity_PullRequest_Build_Driver_Sles15_RTM_1.1/clariion/components/adapters/SystemAPI/framework/src/ConfigMgr.cpp:403] Timeout action (poll): abort

Det här är löst i Unity OE 5.2.0 och senare. Om jobben har slutat svara kontaktar du Dells tekniska support och hänvisar till den här artikeln. Låsta jobb kan ses i Unisphere i avsnittet Händelse/jobb. Supporten hjälper till med att rensa låsta jobb i avsnittet Internal i KB 000059274. 

Dell Unity: Ta bort låsta eller avstängda batchjobb, felkod: 0x7d13151 (kan korrigeras av Dell)
https://www.dell.com/support/kbdoc/en-us/000059274/dell-emc-unity-deleting-stuck-or-suspended-batch-jobs-error-code-0x7d13151

När de låsta jobben har tagits bort måste ECOM-tjänsten startas om med hjälp av KB-000019807. 

Dell Unity: Så här utför du en failover för hanteringstjänster (ECOM) (kan korrigeras av Dell)
https://www.dell.com/support/kbdoc/000019807

Referens: UnityD-54308, UnityD-59297, UEE-16306, UEE-17969