Dell Unity: Unisphere GUI og CLI via SSH er ikke længere tilgængelige efter forsøg på at ændre DNS-indstillinger (kan rettes af Dell)

Unisphere GUI og CLI er ikke længere tilgængelige efter forsøg på at ændre DNS-indstillinger. Genstart af administrationstjenester løser ikke problemet. Det blev også konstateret, at ECOM ikke kører på hverken SP eller fortsætter med at køre i mere end 10 minutter.

Forsøg på at bruge følgende KB til at genstarte MGMT løser ikke problemet:

Dell Unity: Systemet er ikke i stand til at få adgang til Unisphere. Systemet er optaget. Prøv igen senere (kan rettes af brugeren)
https://www.dell.com/support/kbdoc/000056109

Command: svc_restart_service restart MGMT

Indsamling af dataopsamling viste, at der var ECOM-dumpfiler. 

Genstart af hver SP pr. KB 000021439 gjorde det muligt for ECOM at fungere, men kun i 10 minutter ad gangen. 

Dell Unity: Sådan gendannes eller udføres fejlfinding, når administrationstjeneste (ECOM) ikke kører på nogen af sp'erne (kan rettes af brugeren)
https://www.dell.com/support/kbdoc/000021439

Problemet opstår, når en DNS-kommando "papi_clust_set.sh dns xxx" får timeout og forårsagede en ECOM-panik. Det kan også ske, når du bruger Unisphere til at ændre DNS-indstillinger eller til at fjerne en ny DNS-server.

Bemærk: IPMI-værktøjet skal bruges til at oprette forbindelse til begge SP for at udføre fejlfinding, fordi ECOM er nede.  

Triage og gennemgang af logfiler viste hang batchjob fra et mislykket forsøg på at foretage DNS-ændringer til Unity-systemet. 

Kommando, der bruges til at kontrollere: uemcli /sys/task/job show -detail Interne logfiler viste følgende: 
 

cemtracer_sysapi logs 18 Jul 2023 21:51:36 - [SYSAPI] ERROR - {0:777251:881779993}[1053|3741|f70d6b40][doTimeoutAction @ /c4_working/Unity_PullRequest_Build_Driver_Sles15_RTM_1.1/clariion/components/adapters/SystemAPI/framework/src/ConfigMgr.cpp:403] Timeout action (poll): abort Aborting the system. 

ECOM-dumps kan vise tegn, der ligner følgende:

Søg efter "fejl" i cemtracer_sysapi.log viste:

xx Nov xxxx 13:27:52  - [SYSAPI] ERROR - {0:24803979:204377483}[18921|28516|f70d6b40][_watchDogRoutine @ /c4_working/Unity_PullRequest_Build_Driver_Sles15_RTM_1.1/clariion/components/adapters/SystemAPI/framework/src/UpdateManagerImpl.cpp:1511] Watch dog poll request timeout occured. Now:24803979204 TimeGap:900621 Is in Poll:0
xx Nov xxxx 13:27:52  - [SYSAPI] ERROR - {0:24803979:205104121}[18921|28516|f70d6b40][_watchDogRoutine @ /c4_working/Unity_PullRequest_Build_Driver_Sles15_RTM_1.1/clariion/components/adapters/SystemAPI/framework/src/UpdateManagerImpl.cpp:1512] PerfStatReport:
xx Nov xxxx 13:27:52  - [SYSAPI] ERROR - {0:24803979:206876577}[18921|28516|f70d6b40][_watchDogRoutine @ /c4_working/Unity_PullRequest_Build_Driver_Sles15_RTM_1.1/clariion/components/adapters/SystemAPI/framework/src/UpdateManagerImpl.cpp:1516] dependencyMap:
xx Nov xxxx 13:27:52  - [SYSAPI] ERROR - {0:24803979:206905718}[18921|28516|f70d6b40][doTimeoutAction @ /c4_working/Unity_PullRequest_Build_Driver_Sles15_RTM_1.1/clariion/components/adapters/SystemAPI/framework/src/ConfigMgr.cpp:403] Timeout action (poll): abort
xx Nov xxxx 23:16:07  - [SYSAPI] ERROR - {0:1379:344272630}[2919|6108|f17ffb40][Poll @ /c4_working/Unity_PullRequest_Build_Driver_Sles15_RTM_1.1/clariion/components/adapters/SystemAPI/framework/src/TLDPollManager.cpp:383] Admin PEER poll request failed.Error Code = 7e110000.
xx Nov xxxx 23:16:58  - [SYSAPI] ERROR - {0:1429:454592292}[2919|20591|d79ffb40][performRequestBase @ /c4_working/Unity_PullRequest_Build_Driver_Sles15_RTM_1.1/clariion/components/adapters/SystemAPI/framework/src/util/TLDUtils.cpp:346] Admin failed to process request (err = 2115043355):
  TAG_K10_ERROR_PACKET (0x10004)
   TAG_K10_ERROR_CODE (0x10005) num: 2115043355 (0x7e11001b) str: "...~" hex: 1b:0:11:7e
xx Nov xxxx 23:31:15  - [SYSAPI] ERROR - {0:2286:652151017}[2919|6535|f70d6b40][_watchDogRoutine @ /c4_working/Unity_PullRequest_Build_Driver_Sles15_RTM_1.1/clariion/components/adapters/SystemAPI/framework/src/UpdateManagerImpl.cpp:1511] Watch dog poll request timeout occured. Now:2286652 TimeGap:900650 Is in Poll:0
xx Nov xxxx 23:31:15  - [SYSAPI] ERROR - {0:2286:652504752}[2919|6535|f70d6b40][_watchDogRoutine @ /c4_working/Unity_PullRequest_Build_Driver_Sles15_RTM_1.1/clariion/components/adapters/SystemAPI/framework/src/UpdateManagerImpl.cpp:1512] PerfStatReport:
xx Nov xxxx 23:31:15  - [SYSAPI] ERROR - {0:2286:653466119}[2919|6535|f70d6b40][_watchDogRoutine @ /c4_working/Unity_PullRequest_Build_Driver_Sles15_RTM_1.1/clariion/components/adapters/SystemAPI/framework/src/UpdateManagerImpl.cpp:1516] dependencyMap:
xx Nov xxxx 23:31:15  - [SYSAPI] ERROR - {0:2286:653504952}[2919|6535|f70d6b40][doTimeoutAction @ /c4_working/Unity_PullRequest_Build_Driver_Sles15_RTM_1.1/clariion/components/adapters/SystemAPI/framework/src/ConfigMgr.cpp:403] Timeout action (poll): abort

Dette er løst i Unity OE 5.2.0 og højere. Hvis du ikke svarer, kan du kontakte Dells tekniske support og henvise til denne artikel. Hang-job kan ses i Unisphere i afsnittet Hændelse/Opgaver. Support hjælper med at rydde job, der går i stå, ved hjælp af det interne afsnit i KB-000059274. 

Dell Unity: Sletning af fastlåste eller suspenderede batchjob, fejlkode: 0x7d13151 (kan rettes af Dell)
https://www.dell.com/support/kbdoc/en-us/000059274/dell-emc-unity-deleting-stuck-or-suspended-batch-jobs-error-code-0x7d13151

Når de hængte job er fjernet, skal ECOM-tjenesten genstartes vha. KB-000019807. 

Dell Unity: Sådan udfører du en administrationsservice (ECOM) failover (kan rettes af Dell)
https://www.dell.com/support/kbdoc/000019807

Reference: UnityD-54308, UnityD-59297, UEE-16306, UEE-17969