PowerVault ME5: Administrationsgrænsefladen er ikke tilgængelig eller reagerer ikke

Management Controller (MC) og Storage Controller (SC) er separate undersystemer på systemer i ME-serien. Systemet fortsætter med at betjene I/O, men alle administrationsgrænseflader (UI, SSH, seriel, SNMP eller REST API) reagerer ikke.

Typiske symptomer: 

• Brugergrænsefladen i PowerVault Manager er ikke tilgængelig.
• Kan ikke åbne en SSH-session til en eller begge administrationsgrænseflader.
• Kunne ikke logge på seriel CLI-port til session
• Systemet reagerer ikke på eller er forsvundet fra eksterne administrationsprogrammer (SNMP eller REST API).

Når hændelseslogfilerne efterfølgende gennemgås, skal du se løsningstrinnene nedenfor. Administratorer kan muligvis se følgende post i hændelseshistorikloggen, selvom der ikke er nogen firmwareopgradering i gang.

...
B849       2023-08-08 01:08:16  152   WARNING        The Storage Controller is not receiving data from the Management Controller. (This is normal during firmware update.)
...

En tilstand med manglende hukommelse fører til, at administrationsprogramprocesserne afsluttes. Forekomster kan være hyppigere i miljøer, hvor eksterne administrationsprogrammer foretager polling af administrationsgrænsefladerne ved hjælp af SNMP eller REST API.

ME5-produktbemærkninger: 
FMW-65056 Løser en tilstand, der kan resultere i, at CLI og brugergrænseflade ikke svarer.

Hvilke systemer kan være berørt?

1. Hvis det er muligt, kan du prøve at åbne en SSH-session eller alternativt en USB-seriel forbindelse til hver controlleradministrationsgrænseflade og starte administrationscontrollertjenesterne igen. Hvis dette lykkes, skal du opgradere controllerens firmware.
2. I tilfælde, hvor det ikke er muligt at logge på ved hjælp af SSH eller USB-seriel, er det nødvendigt fysisk at genindsætte et af de berørte controllermoduler, og når administrationskontrollen er genvundet på denne controller, skal du genstarte dens peer-controller. På et system, der har et enkelt controller-modul eller konfigurationer, der har værter uden stiredundans, er det nødvendigt at arrangere et vedligeholdelsesvindue, lukke værter ned og derefter slukke for systemet.
3. Når administrationsadgangen er genoprettet til begge controllermoduler, skal du opgradere controllermodulets firmware til version ME5.1.2.0.1 eller nyere.

Procedure:

Trin 1: Forsøg at genstarte administrationstjenesterne på begge controllere.

• Dette trin er muligvis ikke muligt under alle omstændigheder. Genstart af administrationscontrolleren påvirker ikke produktionen. 
• Dette trin afslutter administrationssessionen, og administrationsadgangen genoprettes efter ca. to eller tre minutter, når tjenesterne genstartes.   
• Hvis administrationstjenesterne kan genstartes korrekt på begge controllermoduler, skal du gå til trin 3: Opgrader controllermodulets firmware til ME5.1.2.0.1 eller nyere. 

1. Åbn en SSH-session til hver controllers administrationsgrænseflade, og log på som bruger på administrations- eller administratorniveau. Alternativt kan en administrator prøve med USB-seriel forbindelse til hver controller. Hvis det ikke er muligt at logge på ved hjælp af SSH eller en seriel forbindelse, skal du gå til trin 2: Sæt fysisk et controller-modul eller et slukningssystem på plads.   
2. Hvis loginprocessen lykkes, skal du genstarte administrationscontrolleren på hver enkelt ved hjælp af følgende kommando: 

   restart mc full
   
   # restart mc full
   During the restart process you will briefly lose communication with the specified Management Controller(s).
   Do you want to continue? (y/n) y
   
   Info: Restarting the local MC (A)...
   Success: Command completed successfully. (2023-08-24 05:34:01)
   # Killed

Trin 2: Sæt fysisk et controller-modul eller et slukningssystem på plads. 

Scenarie 1: To controllere med redundant sti til værtskonfiguration

Disse trin kan implementeres uden behov for et vedligeholdelsesvindue.

Følgende betingelser skal være opfyldt:

• Værter skal have en forbindelsessti til controller A og B
• Værter skal have understøttelse af flere stier konfigureret og aktiveret. 
• Alle værtsinitiatorer skal knyttes til diskenheder.

Du kan få vejledning i afsnittet Fjernelse og udskiftning > af enheder, der kan udskiftes af kunden i brugervejledningen til Dell PowerVault ME5-seriens storagesystem.

1. Træk fysisk controllermodul B fremad i dets slot med ca. fem centimeter eller ca. to tommer, og sæt derefter controllermodulet i igen efter 30 sekunder.
2. Der kan gå ca. to eller tre minutter, før controller B er færdig med opstarts- og firmwareindlæsningen. 
3. Åbn en SSH-session til controllerens B-administrations-IP-adresse, og log på som bruger på administrations- eller administratorniveau. 
4. Genstart peer-storagecontroller A. Skriv kommandoen: 

   restart sc a 
   
   # restart sc a While a Storage Controller is restarting, communication will temporarily be lost with the corresponding Management Controller, and also may cause a temporary loss of data availability. Do you want to continue? (y/n) y Success: Command completed successfully. - The command to restart SC A completed successfully. The controller will restart in approximately 30 seconds. (2023-08-24 07:08:39)

5. Når peer-controlleren er online, skal du logge på PowerVault Manager og gå til trin 3: Opgrader controllermodulets firmware til ME5.1.2.0.1 eller nyere.

Scenarie 2: Konfiguration af enkelt controller-modul eller ikke-redundant værtssti

Et vedligeholdelsesvindue er påkrævet. Uventet fjernelse af den enkelte sti til data betyder, at værten mister adgang til data og holder op med at reagere!

Du kan få vejledning i afsnittet Fjernelse og udskiftning > af enheder, der kan udskiftes af kunden i brugervejledningen til Dell PowerVault ME5-seriens storagesystem.

1. Underret brugerne om afbrydelsen, og følg brugervejledningen til værtens operativsystem for at sætte den tilsluttede vært i vedligeholdelsestilstand eller lukke værter ned. 
2. Ved systemets bagside skal du slukke for begge strømforsyninger i ca. 60 sekunder, før du tænder dem igen.
3. Der kan gå ca. tre minutter, før controllerne er færdige med opstarten og indlæsningen af firmwaren.
4. Log på PowerVault Manager, og gå til trin 3: Opgrader controllermodulets firmware til ME5.1.2.0.1 eller nyere.

Trin 3: Opgrader controllermodulets firmware til ME5.1.2.0.1 eller nyere.

Se afsnittet Opdatering af systemfirmware i administratorvejledningen til Dell PowerVault ME5-serien.

• Download controllerens firmwareopdatering. Åbn Dell Support i en webbrowser
• Indtast PowerVault ME-servicekoden, eller vælg PowerVault ME-modellen.
• Vælg produktbemærkningerne til Dell PowerVault ME5-storagesystemet under Dokumentation.
• Under fanen Drev og downloads skal du downloade controllerfirmware til storagecontrollere i Dell PowerVault ME5-serien
• Udpak firmwarens binære fil fra .zip filen.
• Brug af Dell PowerVault Manager. Gå til Maintenance >Firmware >System , og upload den binære firmwarefil.
• Gå til Maintenance >Firmware >System, og klik på linket Aktivér denne version for at få vist dialogboksen.
• Følg anvisningerne på skærmen for at starte aktiveringen.

Adfærd efter opgradering:

Med ME5-controllerens firmwareversion ME5.1.2.0.1 eller nyere kan administratorer lejlighedsvis modtage følgende advarsel. 

Figur 1: Informationsadvarsel

The Management Controller entered a memory exhaustion state and will reboot to recover. Data access will not be interrupted.

Management Controller (MC) leverer administrationsbrugergrænsefladen og CLI-grænsefladen til overvågning og konfiguration af systemet. Genstart af administrationstjenester genstarter ikke controllere eller afbryder I/O. Effekten af genstart er manglende evne til at få adgang til styringsgrænsefladen i to minutter. Hvis du ofte modtager denne informationsadvarsel, kan det være nødvendigt med mere undersøgelse for at fastslå årsagen.